CN109492039A - 一种日志数据的记录方法、装置、电子设备及可读介质 - Google Patents

一种日志数据的记录方法、装置、电子设备及可读介质 Download PDF

Info

Publication number
CN109492039A
CN109492039A CN201811314018.3A CN201811314018A CN109492039A CN 109492039 A CN109492039 A CN 109492039A CN 201811314018 A CN201811314018 A CN 201811314018A CN 109492039 A CN109492039 A CN 109492039A
Authority
CN
China
Prior art keywords
data
content
unique identification
daily record
attribute data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811314018.3A
Other languages
English (en)
Inventor
李博洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN201811314018.3A priority Critical patent/CN109492039A/zh
Publication of CN109492039A publication Critical patent/CN109492039A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本公开实施例公开了一种日志数据的记录方法、装置、电子设备及可读介质。该方法包括:采集操作信息的属性数据,并生成唯一标识;获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。通过采用本公开所提供的技术方案,可以实现将用户的操作日志的获取方式通用化的效果。

Description

一种日志数据的记录方法、装置、电子设备及可读介质
技术领域
本公开实施例涉及计算机技术领域,尤其涉及一种日志数据的记录方法、装置、电子设备及可读介质。
背景技术
随着各种智能终端的迅速发展,各种应用软件也层出不穷。几乎所有的应用软件中都需要对用户的操作行为进行记录,作为开发、调研以及使用的数据基础。因此,操作日志的获取已经成为领域内的热门话题。
传统日志获取方式是当有用户进行操作时,把相应的操作信息记录到数据库中,然后发消息出去,相当于是强耦合在代码和工程里面,而且这种方式只适用于当前的某一个工程,不具有通用性,然而现实场景中,不仅A平台有这样的需求,B平台也需要,因此解决日志获取的通用性问题,有着比较高的现实意义。
发明内容
本公开实施例提供一种日志数据的记录方法、装置、电子设备及可读介质,可以实现将用户的操作日志的获取方式通用化的效果。
第一方面,本公开实施例提供了一种日志数据的记录方法,该方法包括:
采集操作信息的属性数据,并生成唯一标识;
获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;
基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
进一步的,采集操作信息的属性数据,并生成唯一标识,包括:
通过设置在操作入口的拦截器采集操作信息的属性数据,并生成唯一标识;
将所述属性数据和所述唯一标识填充到属性数据消息中;
发布带有所述唯一标识的属性数据消息。
进一步的,所述属性数据包括:操作者、操作时间以及操作对象中的至少一种。
进一步的,获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识,包括:
将操作信息的内容数据存入到数据库中,生成二进制日志;
将所述二进制日志转化为内容数据消息;
发布所述内容数据消息。
进一步的,所述内容数据包括内容表信息、操作类型信息以及变化信息,以及通过特定字段或者扩展字段存储的唯一标识。
进一步的,基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据,包括:
识别订阅到的属性数据消息以及内容数据消息中的唯一标识是否一致;
若是,则将带有所述唯一标识的属性数据消息中的属性数据和所述内容数据消息中的内容数据聚合,形成操作日志数据。
进一步的,在形成操作日志数据之后,所述方法还包括:
通过收集工具将所述操作日志数据写入到搜索引擎中;
当接收到搜索请求时,通过搜索引擎服务接口提供搜索目标操作日志数据。
第二方面,本公开实施例还提供了一种日志数据的记录装置,该装置包括:
属性数据采集模块,用于采集操作信息的属性数据,并生成唯一标识;
内容数据获取模块,用于获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;
操作日志数据聚合模块,用于基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
进一步的,所述属性数据采集模块包括:
拦截器采集单元,用于通过设置在操作入口的拦截器采集操作信息的属性数据,并生成唯一标识;
属性数据消息生成单元,用于将所述属性数据和所述唯一标识填充到属性数据消息中;
属性数据消息发布单元,用于发布带有所述唯一标识的属性数据消息。
进一步的,所述属性数据包括:操作者、操作时间以及操作对象中的至少一种。
进一步的,所述内容数据获取模块包括:
二进制日志生成单元,用于将操作信息的内容数据存入到数据库中,生成二进制日志;
内容数据消息转化单元,用于将所述二进制日志转化为内容数据消息;
内容数据消息发布单元,用于发布所述内容数据消息。
进一步的,所述内容数据包括内容表信息、操作类型信息以及变化信息,以及通过特定字段或者扩展字段存储的唯一标识。
进一步的,所述操作日志数据聚合模块包括:
唯一标识识别单元,用于识别订阅到的属性数据消息以及内容数据消息中的唯一标识是否一致;
操作日志数据聚合单元,用于若所述唯一标识识别单元识别为是,则将带有所述唯一标识的属性数据消息中的属性数据和所述内容数据消息中的内容数据聚合,形成操作日志数据。
进一步的,所述装置还包括:
搜索引擎写入模块,用于通过收集工具将所述操作日志数据写入到搜索引擎中;
操作日志数据查询模块,用于当接收到搜索请求时,通过搜索引擎服务接口提供搜索目标操作日志数据。
第三方面,本公开实施例提供了一种电子设备,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现如本公开实施例所述的日志数据的记录方法。
第四方面,本公开实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本公开实施例所述的日志数据的记录方法。
本公开实施例所提供的技术方案,通过采集操作信息的属性数据,并生成唯一标识;获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。通过采用本公开所提供的技术方案,可以实现将用户的操作日志的获取方式通用化的效果。
附图说明
图1是本公开实施例一提供的日志数据的记录方法的流程图;
图2是本公开实施例一提供的日志数据的记录方法的流程图;
图3是本公开实施例一提供的日志数据的记录方法的流程图;
图4是本公开实施例二提供的日志数据的记录装置的结构示意图;
图5是本公开实施例三提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本公开,而非对本公开的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本公开相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
下述各实施例中,每个实施例中同时提供了可选特征和示例,实施例中记载的各个特征可进行组合,形成多个可选方案,不应将每个编号的实施例仅视为一个技术方案。
实施例一
图1是本公开实施例一提供的日志数据的记录方法的流程图,本实施例可适用对日志数据进行记录的情况,该方法可以由本公开实施例所提供的日志数据的记录装置来执行,该装置可以由软件和/或硬件的方式来实现,并可集成于客户端、终端以及服务器等电子设备中。
如图1所示,所述日志数据的记录方法包括:
S110、采集操作信息的属性数据,并生成唯一标识。
其中,操作信息可以是用户或者开发人员对某一应用程序或者某一平台的操作信息,具体可以是数值变更、登录、访问等任意操作信息。属性数据可以是用户操作的具体内容以外的其他记录与本次用户操作相关的信息,例如,可以是用户操作时所使用的IP地址(Internet Protocol Address,网际协议地址)等。具体的,属性数据的采集方式可以是通过在被操作系统的入口通过设置拦截器的方式,还可以是其他任何可以采集到操作信息的属性数据的方式。
在采集操作信息的属性数据,可以由上述示例中的拦截器生成唯一标识,本方案这样设置是可以将属性数据与后续的内容数据根据唯一标识进行聚合来形成操作日志。其中,唯一标识可以是跟踪请求的全局traceID。这样就可以避免采用以往的直接对操作日志的数据进行存储的情况,可以避免对于不同的平台,在直接对操作日志进行存储时,需要针对不同的平台编辑大量的代码,而所编辑的代码又不具有通用性的问题。因此,在被操作的系统接收到操作信息后,就会在采集属性数据时,生成一个唯一标识。
在本技术方案中,可选的,采集操作信息的属性数据,并生成唯一标识,包括:通过设置在操作入口的拦截器采集操作信息的属性数据,并生成唯一标识;将所述属性数据和所述唯一标识填充到属性数据消息中;发布带有所述唯一标识的属性数据消息。其中,操作入口即为操作信息实际产生时所对应的操作对象的入口。在本技术方案中,可以将属性数据与唯一标识填充到属性数据消息当中,这样设置的好处是可以保证唯一标识与属性数据时对应的。发布带有唯一标识的属性数据消息,可以在后续操作中通过常用的消息订阅方式实现对操作数据的聚合,这样设置的好处是可以提高本技术方案的兼容性,针对绝大多数系统均可以适用。
在本技术方案中,可选的,所述属性数据包括:操作者、操作时间以及操作对象中的至少一种。其中,操作者可以是操作用户的IP地址或者登陆ID(identification,身份)等。操作时间即为操作信息发生的具体时间,可以通过在一个字段中存取时间戳的方式确定,操作对象可以是操作具体所针对的对象,如某平台、某应用程序、某字段甚至某个值信息等。这样设置的好处是可以更加全面的记录与内容数据相关的属性数据,有利于在操作日志形成后,提供全面的操作日志数据进行分析。
S120、获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识。
其中,操作信息的内容数据可以是用户或者开发人员具体操作内容,比如将A值修改为B值,除此之外,还可以将操作的实体表信息以及操作类型进行记录。其中,实体表信息即为table表名,可以确定用户是对谁进行了操作,操作类型可以包括增加、删除以及更改等。通过这样的内容数据的获取,可以在得到操作日志后更加清晰用户实际的操作内容,在有必要时,可以进行操作回溯。
获取内容数据的方式,可以是在将内容数据存储到数据库时,生成一个binlog(二进制日志),并将binlog通过kafka(卡夫卡)消息的方式进行发布,进而在后续操作中对kafka消息进行订阅并获取内容数据。由此可见,当用户的操作所产生的内容数据包括多个时,无法确定内容数据与属性数据的对应关系,因此,需要根据操作信息确定与内容数据关联的唯一标识。
在本技术方案中,可选的,获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识,包括:将操作信息的内容数据存入到数据库中,生成二进制日志;将所述二进制日志转化为内容数据消息;发布所述内容数据消息。由于唯一标识在请求链路最开始的地方生成,需要通过数据库,到kafka消息传入下游,由于数据库这层媒介的隔离,则可以将唯一标识随内容数据持久化在数据库中。那么,实体表信息中可以设置字段存储唯一标识,可以采用单独新开字段用于存储唯一标识的方案,还可以将唯一标识存入扩展字段。以此唯一标识即可以通过binlog转换到kafka消息流入下游。
在上述各技术方案的基础上,可选的,所述内容数据包括内容表信息、操作类型信息以及变化信息,以及通过特定字段或者扩展字段存储的唯一标识。这样设置的好处是可以保证与内容数据伴随的唯一标识能够通过数据库这个媒介,从而保证后续聚合操作日志数据的结果是准确无误的。
S130、基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
基于所述唯一标识,确定需要与当前属性数据聚合的内容数据,或者确定需要与当前内容数据聚合的属性数据,进而形成操作信息。具体的,可以通过订阅kafka消息的方式对具有相同的唯一标识的属性数据和内容数据进行聚合。因为相同的唯一标识的消息的到达可能存在先后,但是无论属性数据的消息先到达,还是内容数据的消息先到达,都会先放入redis(缓存数据库)中,并以唯一标识作为键信息,相应的,可以把先到达的数据作为值信息,后到达的消息通过唯一标识确定与哪个键信息对应的值信息进行聚合,再聚合形成操作日志数据,并同时删除redis中的键信息。
在上述各技术方案的基础上,可选的,基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据,包括:识别订阅到的属性数据消息以及内容数据消息中的唯一标识是否一致;若是,则将带有所述唯一标识的属性数据消息中的属性数据和所述内容数据消息中的内容数据聚合,形成操作日志数据。其中,在确定唯一标识一致后,可以通过将属性数据消息中的属性数据与内容数据消息中的内容数据进行聚合,形成操作日志数据,其中,属性数据消息中的属性数据,可以是属性数据本身就存储在属性数据消息当中,也可以是根据属性数据消息确定这个消息的发出时所对应的属性数据,内容数据消息也是同理。本方案通过对唯一标识的一致性进行判断,若判断为一致,则将两个消息所对应的内容数据与属性数据进行聚合,形成操作日志数据,这样合成简便、准确,并且能够完全复原操作日志数据,不会产生信息损失,而且无需对每个操作日志的数据进行整体的获取,提高平台间操作日志获取的通用性。
在本公开所提供的技术方案中,可以理解的,将属性数据和内容数据通过聚合,可以得到操作日志数据,这里的操作日志数据可以是原始数据,也可以在聚合之后,进行翻译,将其转化成可供人们阅读的操作日志数据,例如,可以使用一个根据所操作业务实体表和字段进行mapping(映射)的模板管理模块,以“模板+数据”的形式进行翻译,最后得到人类可阅读的操作日志。
由此可见,本公开所提供的技术方案只要在系统的操作入口设置有一个拦截器,并在后续的消息发布和订阅过程中对属性数据和内容数据进行聚合,就可以得到准确的操作日志数据。这样设置就无需针对每个平台都单独设置一套操作日志的获取代码,简便实用,能够节省开发人员的人力物力,提高对各种平台的操作日志数据获取的效率。
本公开实施例所提供的技术方案,通过采集操作信息的属性数据,并生成唯一标识;获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。通过采用本公开所提供的技术方案,可以实现将用户的操作日志的获取方式通用化的效果。
图2是本公开实施例一提供的日志数据的记录方法的流程图。本技术方案是在上述技术方案中的各个可选方案为基础进行具体化。具体优化为:在形成操作日志数据之后,所述方法还包括:通过收集工具将所述操作日志数据写入到搜索引擎中;当接收到搜索请求时,通过搜索引擎服务接口提供搜索目标操作日志数据。
如图2所示,所述日志数据的记录方法包括:
S210、采集操作信息的属性数据,并生成唯一标识。
S220、获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识。
S230、基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
S240、通过收集工具将所述操作日志数据写入到搜索引擎中。
无论是属性数据、内容数据、原始操作日志数据还是最后翻译出的操作日志,都可以通过收集工具,例如Logstash工具,写入搜索引擎中,并定期入hive归档。
S250、当接收到搜索请求时,通过搜索引擎服务接口提供搜索目标操作日志数据。
当用户或者开发人员需要搜索相应的操作日志数据,可以在搜索引擎上面输入搜索请求,当接收到搜索请求时,可以通过搜索引擎服务接口,例如RPC(Remote ProcedureCall Protocol,远程过程调用协议)接口提供接口服务,进行对外查询,可以通过属性数据、内容数据以及原始操作日志数据排查问题,或对出现异常的操作日志进行重做回溯。
在上述技术方案的基础上,本技术方案在准确获取到操作日志数据的基础上,提供了如何运用操作日志数据的方法,本方案所提供的方法兼容性强,无论放到任何平台中,通过配置搜索引擎和接口服务,就能够实现提供操作日志数据搜索和导出等服务,以适应用户或者开发人员的使用需求。
图3是本公开实施例一提供的日志数据的记录方法的流程图。本技术方案是在上述技术方案中的各个可选方案为基础进行具体化。
如图3所示,所述日志数据的记录方法包括:
S310、采集操作信息的属性数据,并生成唯一标识。
S320、获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识。
S330、通过收集工具将所述属性数据或内容数据写入到搜索引擎中,以形成请求日志或者数据变更日志;
在本技术方案中,可以把属性数据或者内容数据写入到搜索引擎中,分别形成请求日志或者数据变更日志,可以理解的,请求日志中所记录的是什么时间谁对什么进行了操作,而数据变更日志所记录的是具体的数据变更过程。
S340、当接收到搜索请求时,通过搜索引擎服务接口提供搜索目标请求日志或者数据变更日志。
在上述技术方案的基础上,本技术方案提供了一种可以根据请求者的需求,分别提供请求日志和数据变更日志的方法。这样设置的好处是可以根据搜索请求者的需求,直接调出其想要的消息,而不会调出其他冗余的消息,可以提供根据搜索请求者需求实现提供个性化服务的效果。
实施例二
图4是本公开实施例二提供的日志数据的记录装置的结构示意图。如图4所示,所述日志数据的记录装置,包括:
属性数据采集模块410,用于采集操作信息的属性数据,并生成唯一标识;
内容数据获取模块420,用于获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;
操作日志数据聚合模块430,用于基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
本公开实施例所提供的技术方案,通过采集操作信息的属性数据,并生成唯一标识;获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。通过采用本公开所提供的技术方案,可以实现将用户的操作日志的获取方式通用化的效果。
在上述各技术方案的基础上,可选的,所述属性数据采集模块410包括:
拦截器采集单元,用于通过设置在操作入口的拦截器采集操作信息的属性数据,并生成唯一标识;
属性数据消息生成单元,用于将所述属性数据和所述唯一标识填充到属性数据消息中;
属性数据消息发布单元,用于发布带有所述唯一标识的属性数据消息。
在上述各技术方案的基础上,可选的,所述属性数据包括:操作者、操作时间以及操作对象中的至少一种。
在上述各技术方案的基础上,可选的,所述内容数据获取模块420包括:
二进制日志生成单元,用于将操作信息的内容数据存入到数据库中,生成二进制日志;
内容数据消息转化单元,用于将所述二进制日志转化为内容数据消息;
内容数据消息发布单元,用于发布所述内容数据消息。
在上述各技术方案的基础上,可选的,所述内容数据包括内容表信息、操作类型信息以及变化信息,以及通过特定字段或者扩展字段存储的唯一标识。
在上述各技术方案的基础上,可选的,所述操作日志数据聚合模块430包括:
唯一标识识别单元,用于识别订阅到的属性数据消息以及内容数据消息中的唯一标识是否一致;
操作日志数据聚合单元,用于若所述唯一标识识别单元识别为是,则将带有所述唯一标识的属性数据消息中的属性数据和所述内容数据消息中的内容数据聚合,形成操作日志数据。
在上述各技术方案的基础上,可选的,所述装置还包括:
搜索引擎写入模块,用于通过收集工具将所述操作日志数据写入到搜索引擎中;
操作日志数据查询模块,用于当接收到搜索请求时,通过搜索引擎服务接口提供搜索目标操作日志数据。
上述产品可执行本公开任意实施例所提供的方法,具备执行方法相应的功能模块和有益效果。
实施例三
图5是本公开实施例三提供的一种电子设备的结构示意图。下面参考图5,其示出了适于用来实现本公开实施例的电子设备500的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载电子设备(例如车载导航电子设备)等等的电子设备以及诸如数字TV、台式计算机等等的固定电子设备。图5示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,电子设备500可以包括处理装置(例如中央处理器、图形处理器等)501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中,还存储有电子设备500操作所需的各种程序和数据。处理装置501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
通常,以下装置可以连接至I/O接口505:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507;包括例如磁带、硬盘等的存储装置508;以及通信装置509。通信装置509可以允许电子设备500与其他设备进行无线或有线通信以交换数据。虽然图5示出了具有各种装置的电子设备500,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置509从网络上被下载和安装,或者从存储装置508被安装,或者从ROM 502被安装。在该计算机程序被处理装置501执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:采集操作信息的属性数据,并生成唯一标识;获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
或者,上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:采集操作信息的属性数据,并生成唯一标识;获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,模块、单元的名称在某种情况下并不构成对该模块、单元本身的限定。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种日志数据的记录方法,其特征在于,包括:
采集操作信息的属性数据,并生成唯一标识;
获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;
基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
2.根据权利要求1所述的方法,其特征在于,采集操作信息的属性数据,并生成唯一标识,包括:
通过设置在操作入口的拦截器采集操作信息的属性数据,并生成唯一标识;
将所述属性数据和所述唯一标识填充到属性数据消息中;
发布带有所述唯一标识的属性数据消息。
3.根据权利要求2所述的方法,其特征在于,所述属性数据包括:操作者、操作时间以及操作对象中的至少一种。
4.根据权利要求1所述的方法,其特征在于,获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识,包括:
将操作信息的内容数据存入到数据库中,生成二进制日志;
将所述二进制日志转化为内容数据消息;
发布所述内容数据消息。
5.根据权利要求4所述的方法,其特征在于,所述内容数据包括内容表信息、操作类型信息以及变化信息,以及通过特定字段或者扩展字段存储的唯一标识。
6.根据权利要求1所述的方法,其特征在于,基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据,包括:
识别订阅到的属性数据消息以及内容数据消息中的唯一标识是否一致;
若是,则将带有所述唯一标识的属性数据消息中的属性数据和所述内容数据消息中的内容数据聚合,形成操作日志数据。
7.根据权利要求1所述的方法,其特征在于,在形成操作日志数据之后,所述方法还包括:
通过收集工具将所述操作日志数据写入到搜索引擎中;
当接收到搜索请求时,通过搜索引擎服务接口提供搜索目标操作日志数据。
8.一种日志数据的记录装置,其特征在于,包括:
属性数据采集模块,用于采集操作信息的属性数据,并生成唯一标识;
内容数据获取模块,用于获取操作信息的内容数据,以及由所述操作信息确定的与所述内容数据关联的唯一标识;
操作日志数据聚合模块,用于基于所述唯一标识,将所述属性数据与所述内容数据聚合,形成操作日志数据。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一项所述的日志数据的记录方法。
10.一种电子设备,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-7中任一项所述的日志数据的记录方法。
CN201811314018.3A 2018-11-06 2018-11-06 一种日志数据的记录方法、装置、电子设备及可读介质 Pending CN109492039A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811314018.3A CN109492039A (zh) 2018-11-06 2018-11-06 一种日志数据的记录方法、装置、电子设备及可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811314018.3A CN109492039A (zh) 2018-11-06 2018-11-06 一种日志数据的记录方法、装置、电子设备及可读介质

Publications (1)

Publication Number Publication Date
CN109492039A true CN109492039A (zh) 2019-03-19

Family

ID=65695120

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811314018.3A Pending CN109492039A (zh) 2018-11-06 2018-11-06 一种日志数据的记录方法、装置、电子设备及可读介质

Country Status (1)

Country Link
CN (1) CN109492039A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110428325A (zh) * 2019-07-31 2019-11-08 中国工商银行股份有限公司 交易跟踪方法及装置
CN112449218A (zh) * 2019-09-03 2021-03-05 西安诺瓦星云科技股份有限公司 日志处理方法、装置及终端播放器、服务器
CN116107524A (zh) * 2023-04-13 2023-05-12 杭州朗和科技有限公司 低代码应用日志处理方法、介质、装置和计算设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106156904A (zh) * 2015-03-24 2016-11-23 中国人民解放军国防科学技术大学 一种基于eID的跨平台虚拟资产溯源方法
CN106294866A (zh) * 2016-08-23 2017-01-04 北京奇虎科技有限公司 一种日志处理方法和装置
CN106326349A (zh) * 2016-08-08 2017-01-11 无锡天脉聚源传媒科技有限公司 一种广告统计索引的生成方法及装置
US20170230702A1 (en) * 2014-05-29 2017-08-10 Time Warner Cable Enterprises Llc Apparatus and methods for recording, accessing, and delivering packetized content

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170230702A1 (en) * 2014-05-29 2017-08-10 Time Warner Cable Enterprises Llc Apparatus and methods for recording, accessing, and delivering packetized content
CN106156904A (zh) * 2015-03-24 2016-11-23 中国人民解放军国防科学技术大学 一种基于eID的跨平台虚拟资产溯源方法
CN106326349A (zh) * 2016-08-08 2017-01-11 无锡天脉聚源传媒科技有限公司 一种广告统计索引的生成方法及装置
CN106294866A (zh) * 2016-08-23 2017-01-04 北京奇虎科技有限公司 一种日志处理方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
朱正茂: "《Borland C++ Builder 5 实用编程技术》", 31 January 2001, 水利水电出版社 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110428325A (zh) * 2019-07-31 2019-11-08 中国工商银行股份有限公司 交易跟踪方法及装置
CN112449218A (zh) * 2019-09-03 2021-03-05 西安诺瓦星云科技股份有限公司 日志处理方法、装置及终端播放器、服务器
CN116107524A (zh) * 2023-04-13 2023-05-12 杭州朗和科技有限公司 低代码应用日志处理方法、介质、装置和计算设备

Similar Documents

Publication Publication Date Title
CN109871388A (zh) 数据缓存方法、装置、终电子设备及存储介质
CN109634598A (zh) 一种页面显示方法、装置、设备及存储介质
CN109495790A (zh) 基于编辑器的贴纸添加方法、装置、电子设备及可读介质
CN109492039A (zh) 一种日志数据的记录方法、装置、电子设备及可读介质
CN109769141A (zh) 一种视频生成方法、装置、电子设备及存储介质
CN109446309A (zh) 问题反馈方法及装置
CN108494860A (zh) Web访问系统、用于客户端的web访问方法和装置
CN109992732A (zh) 信息分享方法、装置、电子设备及存储介质
CN110019949A (zh) 视频推荐方法、装置、终端、服务器及可读介质
CN109981322A (zh) 基于标签的云资源管理的方法和装置
JP2023521120A (ja) 共同トレーニングモデルを評価するための方法及び装置
CN109408481A (zh) 日志采集规则的更新方法、装置、电子设备及可读介质
CN110263565A (zh) 用于调用服务的方法和装置
CN110209315A (zh) 用户界面中字符的显示方法、装置、电子设备及存储介质
CN109597929A (zh) 搜索结果的展示方法、装置、终端及可读介质
CN113392158A (zh) 业务数据处理方法、装置及数据中台
CN110286928A (zh) 应用程序的界面元素更新方法、装置、电子设备及存储介质
CN110889263A (zh) 文档的待办事项生成方法、装置、设备及存储介质
CN109684022A (zh) 文字输入处理方法、装置和电子设备
CN111309228A (zh) 多媒体处理方法、装置及电子设备
CN109491646A (zh) 一种消息录入方法、装置、电子设备及可读介质
CN109828980A (zh) 数据缓存方法、装置、终端及存储介质
CN109819042A (zh) 用于提供软件开发工具包的方法和装置
CN109814915A (zh) 基于lua的参数配置方法、装置、介质和电子设备
CN110263004A (zh) 日志记录方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190319