CN110704414A - 一种日志数据的清洗方法、装置、电子设备和存储介质 - Google Patents

一种日志数据的清洗方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN110704414A
CN110704414A CN201910949472.4A CN201910949472A CN110704414A CN 110704414 A CN110704414 A CN 110704414A CN 201910949472 A CN201910949472 A CN 201910949472A CN 110704414 A CN110704414 A CN 110704414A
Authority
CN
China
Prior art keywords
data
type
log
cleaning
key
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910949472.4A
Other languages
English (en)
Inventor
姜昆
尹子杰
王可攀
彭喜喜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canada Plus (beijing) Mdt Infotech Ltd
Original Assignee
Canada Plus (beijing) Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canada Plus (beijing) Mdt Infotech Ltd filed Critical Canada Plus (beijing) Mdt Infotech Ltd
Priority to CN201910949472.4A priority Critical patent/CN110704414A/zh
Publication of CN110704414A publication Critical patent/CN110704414A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例涉及一种日志数据的清洗方法、装置、电子设备和存储介质,包括:获取待清洗的日志数据;对日志数据进行切分,获得第一类型数据和第二类型数据;分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;将日志清洗字段存储到数据库中;本发明实施例对待清洗的日志数据进行切分,得到不同类型的日志数据;对不同类型的日志数据采用不同的方法进行清洗,得到日志清洗字段;不仅提高了日志数据清洗的准确性,并且将日志清洗字段存储到数据库中,为用户在后续使用过程中对清洗字段进行查询、分析提供了方便。

Description

一种日志数据的清洗方法、装置、电子设备和存储介质
技术领域
本发明实施例涉及数据清洗技术领域,具体涉及一种日志数据的清洗方法、装置、电子设备和存储介质。
背景技术
现有技术中,在对日志数据清洗的过程中,考虑到用json直接来取,在这个过程中发明人发现:日志数据并不仅仅是标准的json,可能包括多种类型的日志数据,若采用json对日志数据进行取,会导致清洗出来的数据不准确。
发明内容
本发明的至少一个实施例提供了一种日志数据的清洗方法、装置、电子设备和存储介质,解决了现有技术中清洗不准确的技术问题。
第一方面,本发明实施例提出一种日志数据的清洗方法,包括:
获取待清洗的日志数据;
对日志数据进行切分,获得第一类型数据和第二类型数据;
分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;
将日志清洗字段存储到数据库中。
在一些实施例中,上述方法中分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段包括:
将第一类型数据构建成至少一个数组,以及从第二类型数据中提取至少一个关键字对。
在一些实施例中,上述方法中从第二类型数据中提取至少一个关键字对包括:
根据第二类型数据中的标点符号,从第二类型数据中提取至少一个关键字段,以及与关键字段对应的关键值,关键字段与关键值构成一个关键字对。
在一些实施例中,从第二类型数据中提取至少一个关键字对具体为:
通过哈希命令从第二类型数据中提取至少一个关键字对,并将关键字对存储到哈希图中。
第二方面,本发明实施例还提出一种日志数据的清洗装置,包括:
获取模块,用于获取待清洗的日志数据;
切分模块:用于对日志数据进行切分,获得第一类型数据和第二类型数据;
清洗模块:用于分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;
存储模块:用于将日志清洗字段存储到数据库中。
在一些实施例中,上述装置中的清洗模块分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段包括:
将第一类型数据构建成至少一个数组,以及从第二类型数据中提取至少一个关键字对。
在一些实施例中,上述装置中的清洗模块从第二类型数据中提取至少一个关键字对包括:
根据第二类型数据中的标点符号,从第二类型数据中提取至少一个关键字段,以及与关键字段对应的关键值,关键字段与关键值构成一个关键字对。
在一些实施例中,上述装置中的清洗模块从第二类型数据中提取至少一个关键字对具体为:
通过哈希命令从第二类型数据中提取至少一个关键字对,并将关键字对存储到哈希图中。
第三方面,本发明实施例还提供了一种电子设备,包括:处理器和存储器;
处理器通过调用存储器存储的程序或指令,用于执行上述日志数据清洗方法的步骤。
第四方面,本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质存储程序或指令,程序或指令使计算机执行上述日志数据清洗的方法的步骤。
本发明实施例中提供的日志数据清洗方法的优点在于:对待清洗的日志数据进行切分,得到不同类型的日志数据;对不同类型的日志数据采用不同的方法进行清洗,得到日志清洗字段不仅提高了日志数据清洗的准确性,并且将日志清洗字段存储到数据库中,方便用户在后续使用过程中对清洗字段进行查询、分析。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种日志数据清洗方法的流程示意图;
图2为本发明实施例提出的一种日志清洗装置的结构示意图;
图3为本发明实施例提供的电子设备的硬件结构示意图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。基于所描述的本发明的实施例,本领域普通技术人员所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。
图1是本发明实施例提供的一种日志数据清洗方法的流程示意图;
第一方面,本发明实施例提出一种日志数据的清洗方法,结合图1,包括:以下四个步骤:S101、S102、S103和S104。
S101:获取待清洗的日志数据;
具体的,本发明实施例中的待清洗数据是从对象存储系统中获取的,获取到待清洗数据后进行解压,解压后对待清洗的数据进行遍历、读取和切分。
S102:对日志数据进行切分,获得第一类型数据和第二类型数据;
具体的,本发明实施例中对日志数据进行切分,可以是切分分隔符,如tab,用户可以根据实际情况自定义切分分隔符,切分获得不同类型的日志数据,提高了日志数据清洗的灵活性。
S103:分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;
具体的,本发明实施例中对不同类型的数据采用不同的方法进行清洗,提高了日志数据清洗的准确性。
S104:将日志清洗字段存储到数据库中。
具体的,本发明实施例中将日志清洗字段存储到数据库中,方便用户在后续过程中对清洗字段进行查询、分析。
在一些实施例中,上述方法中步骤S103中分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段包括:
将第一类型数据构建成一个数组,以及从第二类型数据中提取至少一个关键字对。
具体的,本发明实施例中以push日志数据为例,将push日志清洗到push表中,第一类型数据如下:
Push2019-08-15 22:03:44 265235 0AB97D4737216992B62D6F5005088D05 0101117.140.220.7 XpbsErvw9K 2097652523832
切分后得到的第一类型数据为:
2019-08-1522:03:44265235,0AB97D4737216992B62D6F5005088D05,0,101,117.140.220.7,XpbsErvw9K,209765,null,2523832
本发明实施例中的分隔符为逗号,构建的一个数组用array及其下标表示,获得push,构建的数组的第一个值为下标为0array[0])就是push;
获得“2019-08-15 22:03:44 265235”构建数组的第二个值为下标为1array[1])就是2019-08-15 22:03:44 265235;
获得“0AB97D4737216992B62D6F5005088D05”,构建的数组的第三个值为下标为2,
array[2]就是0AB97D4737216992B62D6F5005088D05;
获得“0”,构建的数组array[3])就是0;
获得“101”构建的数组array[4])就是101;
获得“117.140.220.7”,构建的数组的下标为5array[5]就是117.140.220.7;
获得“XpbsErvw9K”,构建的数组的下标为6array[6])就是XpbsErvw9K;
获得“209765”构建的数组的下标为7array[7])就是209765;
获得“null”构建的数组的下标为8array[8])就是null;
获得“2523832”构建的数组的下标为9array[9])就是2523832。
上面的实施例主要介绍的是第一类型数据的清洗,下面介绍第二类型数据的清洗。
在一些实施例中,上述方法中从第二类型数据中提取至少一个关键字对包括:
根据第二类型数据中的标点符号,从第二类型数据中提取至少一个关键字段,以及与关键字段对应的关键值,关键字段与关键值构成一个关键字对。
第二类型数据如下:
{"err":0,"rmip":"192.168.5.197","r_x":"q","reqId":"73eeb9fdf130054baca38e3a749a18c7","adzoneid":1000000000381,"meid":91160871,"blTime":"0.4511","site_url":"www.iqiyi.com","site_title":"2019u5b9du9a6cu9526u6807u8d5bu7b2cu4e00u8f6eu7126u70b9u7ec4","site_channelid":40004,"iswifi":1,"device_osv":"8.1.0","device_model":"V1818CA","device_connectiontype":"2","device_type":"phone","os":"android","mtype":"imei","muid":"0AB97D4737216992B62D6F5005088D05","plat":2,"aftime":"8.9960","upidip":0,"afidip":0,"afcode":"1004","ischeck":1,"tyscore":10,"aderId":47,"divType":2,"dmpId":1012,"dmpTime":1.766,"d_pg":"1103080,1103084,1103096,1103083,1103521,1103522,1103762,1104336,1104342,1104613,1120754,1120756,1121101,1121100,1121063,1121078,1121130","dmpres":"ZR,TYZR,1121063","cc_debug_delete":2523499,"newtags":1,"cmrd":1,"o_freqtime1":"0.5641","fqc":"0|0","fqc_brand":"57|57","s_cachedata":1,"mumtag":0,"divTime":"14.7920","plat_new":2,"position_id":1242,"campaign_group_id":2250,"isTA":1,"cmsTa":"0.7","TA":1,"taScore":1,"so":64,"rolltype":1,"cid":"21393259","p":1,"usetime":15.8251953125}
根据第二类型数据中的标点符号,提取的至少一个关键字段,以及与关键字段对应的关键值,如下:
{(err,0),(rmip,192.168.5.197),(r_x,q),(reqId,73eeb9fdf130054baca38e3a749a18c7),(adzoneid,1000000000381)…}
关键字段与关键值构成一个关键字对,如(err,0)就是一个关键字对,(rmip,192.168.5.197)是另一个关键字对,err是关键字段,0是err对应的关键值,rmip关键字段,192.168.5.197是rmip对应的关键值,这里只是举例说明,不做唯一限定。
在一些实施例中,从第二类型数据中提取至少一个关键字对具体为:
通过哈希命令从第二类型数据中提取至少一个关键字对,并将关键字对存储到哈希图中。
本申请实施例把标点符号"到",的数据取个名字叫做font,也就是关键字段,把:"到",或者:到,这个范围内的数据取个名字叫做values,也就是关键字段对应的关键值,然后利用Hashmap.put(font,values)就会存储到哈希图中。
具体的,本发明实施例通过哈希命令从第二类型数据中提取至少一个关键字对,本发明实施例中的哈希命令使用得是hashmap命令,hashmap是一个个的关键值对而且把清洗的字段存储到哈希图中。
本申请实施例中若获取err,rmip的关键值,可以利用命令hashmap.get(‘err’)获得0,利用命令hashmap.get(‘rmip’)获得192.168.5.197。
上述第二类型数据中,利用Hashmap.put(font,values)存储到到哈希图的过程中,当执行下一条put方法的时候会把相同的关键字段对应的关键值替换成下一条的关键值,以此类推这样在清洗数据的时候每个字段只清洗一遍,大大提高了日志数据的清洗效率。
图2为本发明实施例提出的一种日志清洗装置的结构示意图;
第二方面,结合图2,本发明实施例还提出一种日志数据的清洗装置,包括:
获取模块201,用于获取待清洗的日志数据;
具体的,本发明实施例中的待清洗数据是从对象存储系统中获取的,获取到待清洗数据后进行解压,方便后续读取。
切分模块202:用于对日志数据进行切分,获得第一类型数据和第二类型数据;
具体的,本发明实施例中对日志数据进行切分,可以是切分分隔符,如tab,用户可以根据实际情况自定义切分分隔符,切分获得不同类型的日志数据。
清洗模块203:用于分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;
具体的,本发明实施例中对不同类型的数据采用不同的方法进行清洗,提高了日志数据清洗的准确性。
存储模块204:用于将日志清洗字段存储到数据库中。
具体的,本发明实施例中将日志清洗字段存储到数据库中,方便用户在后续过程中对清洗字段进行查询、分析。
在一些实施例中,上述装置中的清洗模块203分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段包括:
将第一类型数据构建成至少一个数组,以及从第二类型数据中提取至少一个关键字对。
具体的,切分后得到的第一类型数据为:
2019-08-1522:03:44265235,0AB97D4737216992B62D6F5005088 D05,0,101,117.140.220.7,XpbsErvw9K,209765,null,2523832)
本发明实施例中的分隔符为逗号,清洗模块构建的至少一个数组用array及其下标表示,获得push,构建的第一个数组array[0])就是push;
获得“2019-08-15 22:03:44 265235”构建的第二个数组array[1])就是2019-08-15 22:03:44 265235,在此不再进行一一列举。
具体的,第二类型数据如下:{"err":0,"rmip":"192.168.5.197",
提取关键字对后如下:{(err,0),(rmip,192.168.5.197),
在一些实施例中,上述装置中的清洗模块203从第二类型数据中提取至少一个关键字对包括:
根据第二类型数据中的标点符号,从第二类型数据中提取至少一个关键字段,以及与关键字段对应的关键值,关键字段与关键值构成一个关键字对。
在一些实施例中,上述装置中的清洗模块203从第二类型数据中提取至少一个关键字对具体为:
通过哈希命令从第二类型数据中提取至少一个关键字对,并将关键字对存储到哈希图中。
本申请实施例的清洗模块把标点符号"到",的数据取个名字叫做font,也就是关键字段,把:"到",或者:到,这个范围内的数据取个名字叫做values,也就是关键字段对应的关键值,然后利用Hashmap.put(font,values)就会存储到到哈希图中。
具体的,本发明实施例的清洗模块通过哈希命令从第二类型数据中提取至少一个关键字对,本发明实施例中的哈希命令使用得是hashmap命令,hashmap是一个个的关键值对而且把清洗的字段存储到哈希图中。
第三方面,本发明实施例还提供了一种电子设备,包括:处理器和存储器;
处理器通过调用存储器存储的程序或指令,用于执行上述日志数据清洗方法的步骤。
第四方面,本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质存储程序或指令,程序或指令使计算机执行上述日志数据清洗的方法的步骤。
图3为本发明实施例提供的电子设备的硬件结构示意图,如图3所示,该电子设备可以包括手机、PAD的智能终端,该电子设备包括:
一个或多个处理器301,图3中以一个处理器301为例;
存储器302;
所述电子设备还可以包括:输入装置303和输出装置304。
所述电子设备中的处理器301、存储器302、输入装置303和输出装置304可以通过总线或者其他方式连接,图2中以通过总线连接为例。
存储器302作为一种非暂态计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的应用程序的界面显示方法对应的程序指令/模块(例如,附图2所示的获取模块201、切分模块202、清洗模块203和存储模块204)。处理器301通过运行存储在存储器302中的软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例的界面显示方法。
存储器302可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器302可以包括高速随机存取存储器,还可以包括非暂态性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态性固态存储器件。在一些实施例中,存储器302可选包括相对于处理器301远程设置的存储器,这些远程存储器可以通过网络连接至终端设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置303可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置304可包括显示屏等显示设备。
本发明实施例还提供一种包含计算机可读存储介质,该计算机可读存储介质存储程序或指令,该程序或指令使计算机执行行时用于执行一种日志数据的清洗方法,该方法包括:
获取待清洗的日志数据;
对日志数据进行切分,获得第一类型数据和第二类型数据;
分别对第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;
将日志清洗字段存储到数据库中。
可选的,该计算机可执行指令在由计算机处理器执行时还可以用于执行本发明任意实施例所提供的日志数据的清洗方法的技术方案。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明实施例所述的方法。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。
虽然结合附图描述了本发明的实施方式,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (10)

1.一种日志数据的清洗方法,其特征在于,所述方法包括:
获取待清洗的日志数据;
对所述日志数据进行切分,获得第一类型数据和第二类型数据;
分别对所述第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;
将所述日志清洗字段存储到数据库中。
2.根据权利要求1所述的清洗方法,其特征在于,所述分别对所述第一类型数据和第二类型数据进行清洗,以获得日志清洗字段包括:
将所述第一类型数据构建成至少一个数组,以及从所述第二类型数据中提取至少一个关键字对。
3.根据权利要求2所述的清洗方法,其特征在于,所述从第二类型数据中提取至少一个关键字对包括:
根据第二类型数据中的标点符号,从第二类型数据中提取至少一个关键字段,以及与所述关键字段对应的关键值,所述关键字段与所述关键值构成一个关键字对。
4.根据权利要求2所述的清洗方法,其特征在于,所述从所述第二类型数据中提取至少一个关键字对具体为:
通过哈希命令从第二类型数据中提取至少一个关键字对,并将所述关键字对存储到哈希图中。
5.一种日志数据的清洗装置,其特征在于,所述装置包括:
获取模块,用于获取待清洗的日志数据;
切分模块:用于对所述日志数据进行切分,获得第一类型数据和第二类型数据;
清洗模块:用于分别对所述第一类型数据和第二类型数据进行清洗,以获得日志清洗字段;
存储模块:用于将所述日志清洗字段存储到数据库中。
6.根据权利要求5所述的清洗装置,其特征在于,所述清洗模块分别对所述第一类型数据和第二类型数据进行清洗,以获得日志清洗字段包括:
将所述第一类型数据构建成至少一个数组,以及从所述第二类型数据中提取至少一个关键字对。
7.根据权利要求6所述的清洗装置,其特征在于,所述清洗模块从第二类型数据中提取至少一个关键字对包括:
根据第二类型数据中的标点符号,从第二类型数据中提取至少一个关键字段,以及与所述关键字段对应的关键值,所述关键字段与所述关键值构成一个关键字对。
8.根据权利要求6所述的清洗装置,其特征在于,所述清洗模块从所述第二类型数据中提取至少一个关键字对具体为:
通过哈希命令从第二类型数据中提取至少一个关键字对,并将所述关键字对存储到哈希图中。
9.一种电子设备,其特征在于,包括:处理器和存储器;
所述处理器通过调用所述存储器存储的程序或指令,用于执行如权利要求1至4任一项所述方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储程序或指令,所述程序或指令使计算机执行如权利要求1至4任一项所述方法的步骤。
CN201910949472.4A 2019-10-08 2019-10-08 一种日志数据的清洗方法、装置、电子设备和存储介质 Pending CN110704414A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910949472.4A CN110704414A (zh) 2019-10-08 2019-10-08 一种日志数据的清洗方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910949472.4A CN110704414A (zh) 2019-10-08 2019-10-08 一种日志数据的清洗方法、装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN110704414A true CN110704414A (zh) 2020-01-17

Family

ID=69197066

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910949472.4A Pending CN110704414A (zh) 2019-10-08 2019-10-08 一种日志数据的清洗方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN110704414A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115509851A (zh) * 2022-09-14 2022-12-23 易纳购科技(北京)有限公司 页面监控方法、装置及设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1633080A (zh) * 2003-12-24 2005-06-29 华为技术有限公司 在网络管理系统中实现日志的方法
CN106682099A (zh) * 2016-12-01 2017-05-17 北京奇虎科技有限公司 一种数据的存储方法和装置
CN109510721A (zh) * 2018-11-01 2019-03-22 郑州云海信息技术有限公司 一种基于Syslog的网络日志管理方法与系统
CN109542741A (zh) * 2018-10-11 2019-03-29 平安科技(深圳)有限公司 日志自动分组存储方法、装置、计算机设备和存储介质
CN109614382A (zh) * 2018-12-11 2019-04-12 杭州数梦工场科技有限公司 一种应用的日志分割方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1633080A (zh) * 2003-12-24 2005-06-29 华为技术有限公司 在网络管理系统中实现日志的方法
CN106682099A (zh) * 2016-12-01 2017-05-17 北京奇虎科技有限公司 一种数据的存储方法和装置
CN109542741A (zh) * 2018-10-11 2019-03-29 平安科技(深圳)有限公司 日志自动分组存储方法、装置、计算机设备和存储介质
CN109510721A (zh) * 2018-11-01 2019-03-22 郑州云海信息技术有限公司 一种基于Syslog的网络日志管理方法与系统
CN109614382A (zh) * 2018-12-11 2019-04-12 杭州数梦工场科技有限公司 一种应用的日志分割方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
栗云天等: "《疯狂站长之PHP》", 31 October 2000 *
韦鹏程等 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115509851A (zh) * 2022-09-14 2022-12-23 易纳购科技(北京)有限公司 页面监控方法、装置及设备

Similar Documents

Publication Publication Date Title
JP6514244B2 (ja) 差異検出装置及びプログラム
US20210374195A1 (en) Information processing method, electronic device and storage medium
CN105278970A (zh) 一种数据处理方法、装置和终端
EP2933731A1 (en) Method for configuring browser bookmarks, device and terminal thereof
WO2014153991A1 (en) Browser collection method, system and terminal device, and computer-readable storage medium
CN110928984A (zh) 一种知识图谱的构建方法、装置、终端及存储介质
JP2018132965A (ja) 障害解析プログラム、障害解析装置及び障害解析方法
CN112256517A (zh) 基于lstm-dssm的虚拟化平台的日志分析方法及装置
CN107871055B (zh) 一种数据分析方法和装置
CN108664492A (zh) 一种向用户推送内容的方法、装置、电子设备和存储介质
CN110704414A (zh) 一种日志数据的清洗方法、装置、电子设备和存储介质
CN114398138A (zh) 界面生成方法、装置、计算机设备和存储介质
CN107291743B (zh) 数据的调用方法和装置
WO2017097102A1 (zh) 检索方法和检索装置
CN111078671A (zh) 数据表字段的修改方法、装置、设备和介质
CN115481025A (zh) 自动化测试的脚本录制方法、装置、计算机设备及介质
CN106469086B (zh) 事件处理方法和装置
CN110795424B (zh) 特征工程变量数据请求处理方法、装置及电子设备
CN112486796A (zh) 一种采集车载智能终端信息的方法和装置
CN110020268B (zh) 页面返回方法及装置
CN108459940B (zh) 应用性能管理系统的配置信息修改方法、装置及电子设备
CN114328477A (zh) 数据处理方法及装置
CN109241428B (zh) 用户性别的确定方法、装置、服务器及存储介质
CN116431698B (zh) 一种数据提取方法、装置、设备及存储介质
CN117742900B (zh) 一种服务调用图的构造方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200117