CN112214465A - 日志存储系统及方法 - Google Patents

日志存储系统及方法 Download PDF

Info

Publication number
CN112214465A
CN112214465A CN202011120092.9A CN202011120092A CN112214465A CN 112214465 A CN112214465 A CN 112214465A CN 202011120092 A CN202011120092 A CN 202011120092A CN 112214465 A CN112214465 A CN 112214465A
Authority
CN
China
Prior art keywords
log
log data
target
server
game
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011120092.9A
Other languages
English (en)
Inventor
梁波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhuhai Kingsoft Online Game Technology Co Ltd
Original Assignee
Zhuhai Kingsoft Online Game Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhuhai Kingsoft Online Game Technology Co Ltd filed Critical Zhuhai Kingsoft Online Game Technology Co Ltd
Priority to CN202011120092.9A priority Critical patent/CN112214465A/zh
Publication of CN112214465A publication Critical patent/CN112214465A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/1805Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815Journaling file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/3476Data logging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44505Configuring for program initiating, e.g. using registry, configuration files
    • G06F9/4451User profiles; Roaming

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本说明书提供日志存储系统及方法,其中所述日志存储系统包括:多个游戏服务器、游戏中心服务器和日志服务器;所述多个游戏服务器中的任一游戏服务器,被配置为按照目标格式生成日志数据,并将所述日志数据发送给所述游戏中心服务器;所述游戏中心服务器,被配置为接收所述日志数据,并将所述日志数据发送给所述日志服务器;所述日志服务器,被配置为接收所述日志数据,并根据所述目标格式从所述日志数据的目标字段中读取目标日志类型,对所述日志数据进行分类存储。游戏服务器可以按照预先协议好的目标格式生成日志数据,从而实现了可以通过单独的日志服务器按需分类存储日志数据。

Description

日志存储系统及方法
技术领域
本说明书涉及游戏数据处理技术领域,特别涉及日志存储系统及方法。
背景技术
随着计算机技术和网络技术的快速发展,游戏技术日趋成熟,在游戏运行过程中,游戏服务器会产生大量的日志数据,用来记录玩家的游戏行为,以供客服查询人员及开发人员进行挖掘分析等。现有技术中,各个游戏服务器产生大量的日志数据后,需要运维人员介入,按关键字对日志数据进行筛选和一系列的数据处理,之后再提供给其他工作人员(如客服、开发人员等)使用。然而,上述过程中,必须要运维人员介入,对日志数据进行筛选处理,其他工作人员才能使用日志数据,效率低下,且依靠运维人员手动筛选处理,容易出错,进而需要更简单更便捷的方法对日志数据进行处理。
发明内容
有鉴于此,本说明书实施例提供了一种日志存储系统。本说明书同时涉及一种日志存储方法,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种日志存储系统,所述系统包括:多个游戏服务器、游戏中心服务器和日志服务器,所述多个游戏服务器和所述游戏中心服务器进行通信连接,所述游戏中心服务器和所述日志服务器进行通信连接;
所述多个游戏服务器中的任一游戏服务器,被配置为按照目标格式生成日志数据,并将所述日志数据发送给所述游戏中心服务器;
所述游戏中心服务器,被配置为接收所述日志数据,并将所述日志数据发送给所述日志服务器;
所述日志服务器,被配置为接收所述日志数据,并根据所述目标格式从所述日志数据的目标字段中读取目标日志类型,对所述日志数据进行分类存储。
可选的,所述游戏服务器进一步被配置为:
接收日志生成协议,所述日志生成协议定义日志数据生成的目标格式,所述目标格式至少包括日志类型以及所述日志类型在日志数据中的目标字段;
根据所述日志生成协议生成日志数据。
可选的,所述日志服务器进一步被配置为:
生成用于日志数据存储的配置文件,所述配置文件中包括日志类型和存储地址之间的对应关系。
可选的,所述日志服务器进一步被配置为:
在所述配置文件中查找所述目标日志类型;
在查找到所述目标日志类型的情况下,将所述目标日志类型对应的存储地址确定为目标存储地址,将所述日志数据存储至所述目标存储地址;
在未查找到所述目标日志类型的情况下,不对所述日志数据进行存储。
可选的,所述日志服务器进一步被配置为:
接收输入的日志查询指令;
根据所述日志查询指令,查询对应的目标日志数据;
在查询到所述目标日志数据的情况下,返回所述目标日志数据;
在未查询到所述目标日志数据的情况下,返回查询失败的消息。
可选的,所述日志服务器进一步被配置为:
确定所述日志查询指令中携带的查询类型;
根据所述查询类型,确定对应的查询地址;
确定所述日志查询指令中携带的日志标识;
在所述查询地址中,查询所述日志标识对应的目标日志数据。
根据本说明书实施例的第二方面,提供了一种日志存储方法,所述方法包括:
游戏服务器按照目标格式生成日志数据,并将所述日志数据发送给游戏中心服务器;
所述游戏中心服务器接收所述日志数据,并将所述日志数据发送给日志服务器;
所述日志服务器接收所述日志数据,并根据所述目标格式从所述日志数据的目标字段中读取目标日志类型,对所述日志数据进行分类存储。
根据本说明书实施例的第三方面,提供了一种日志存储方法,应用于上述第一方面所述的日志存储系统中的日志服务器,所述方法包括:
接收游戏中心服务器发送的日志数据,所述日志数据为游戏服务器按照目标格式生成并发送给所述游戏中心服务器的日志数据;
根据所述目标格式从所述日志数据的目标字段中读取目标日志类型;
对所述日志数据进行分类存储。
可选的,所述接收游戏中心服务器发送的日志数据之前,还包括:
生成用于日志数据存储的配置文件,所述配置文件中包括日志类型和存储地址之间的对应关系。
可选的,所述对所述日志数据进行分类存储,包括:
在所述配置文件中查找所述目标日志类型;
在查找到所述目标日志类型的情况下,将所述目标日志类型对应的存储地址确定为目标存储地址,将所述日志数据存储至所述目标存储地址;
在未查找到所述目标日志类型的情况下,不对所述日志数据进行存储。
可选的,所述对所述日志数据进行分类存储之后,还包括:
接收输入的日志查询指令;
根据所述日志查询指令,查询对应的目标日志数据;
在查询到所述目标日志数据的情况下,返回所述目标日志数据;
在未查询到所述目标日志数据的情况下,返回查询失败的消息。
可选的,所述根据所述日志查询指令,查询对应的目标日志数据,包括:
确定所述日志查询指令中携带的查询类型;
根据所述查询类型,确定对应的查询地址;
确定所述日志查询指令中携带的日志标识;
在所述查询地址中,查询所述日志标识对应的目标日志数据。
根据本说明书实施例的第四方面,提供了一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,以实现下述方法:
接收游戏中心服务器发送的日志数据,所述日志数据为游戏服务器按照目标格式生成并发送给所述游戏中心服务器的日志数据;
根据所述目标格式从所述日志数据的目标字段中读取目标日志类型;
对所述日志数据进行分类存储。
根据本说明书实施例的第五方面,提供了一种计算机可读存储介质,其存储有计算机可执行指令,该指令被处理器执行时实现所述第三方面所述的日志存储方法的步骤。
本说明书提供的日志存储系统包括:多个游戏服务器、游戏中心服务器和日志服务器,多个游戏服务器和游戏中心服务器进行通信连接,游戏中心服务器和日志服务器进行通信连接;多个游戏服务器中的任一游戏服务器,被配置为按照目标格式生成日志数据,并将日志数据发送给游戏中心服务器;游戏中心服务器,被配置为接收日志数据,并将日志数据发送给日志服务器;日志服务器,被配置为接收日志数据,并根据目标格式从日志数据的目标字段中读取目标日志类型,对日志数据进行分类存储。这种情况下,所有玩家的游戏行为(即日志数据)记录是通过一个独立的日志服务器,游戏服务器可以按照预先协议好的目标格式生成日志数据,由游戏中心服务器汇总后发送给日志服务器,日志服务器通过目标格式,可以直接在目标字段读取日志数据的日志类型,之后根据需求将不同类型的日志数据存储至不同的存储地址,从而使得后续其他工作人员可以直接通过日志服务器在相应的存储地址查询所需的日志数据,不需要运维人员介入,在提高日志数据的处理效率的基础上,避免了出错。
附图说明
图1是本说明书一实施例提供的一种日志存储系统的结构示意图;
图2是本说明书一实施例提供的一种日志存储方法的流程图;
图3是本说明书一实施例提供的一种日志生成协议的示意图;
图4是本说明书一实施例提供的一种配置文件的示意图;
图5是本说明书一实施例提供的一种应用于日志存储系统中的日志服务器的日志存储方法的流程图;
图6是本说明书一实施例提供的一种日志数据的处理流程示意图;
图7是本说明书一实施例提供的一种计算设备的结构框图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本说明书。但是本说明书能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本说明书内涵的情况下做类似推广,因此本说明书不受下面公开的具体实施的限制。
在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本说明书一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本说明书一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
在本说明书中,提供了一种日志存储系统,本说明书同时涉及一种日志存储方法,一种计算设备,以及一种计算机可读存储介质,在下面的实施例中逐一进行详细说明。
图1示出了根据本说明书一实施例提供的一种日志存储系统的结构示意图,如图1所示,该日志存储系统包括:多个游戏服务器102、游戏中心服务器104和日志服务器106,多个游戏服务器102和游戏中心服务器104进行通信连接,游戏中心服务器104和日志服务器106进行通信连接;
多个游戏服务器102中的任一游戏服务器102,被配置为按照目标格式生成日志数据,并将日志数据发送给游戏中心服务器104;
游戏中心服务器104,被配置为接收日志数据,并将日志数据发送给日志服务器106;
日志服务器106,被配置为接收日志数据,并根据目标格式从日志数据的目标字段中读取目标日志类型,对日志数据进行分类存储。
本实施例一个可选的实施方式中,游戏服务器102进一步被配置为:
接收日志生成协议,日志生成协议定义日志数据生成的目标格式,目标格式至少包括日志类型以及日志类型在日志数据中的目标字段;
根据日志生成协议生成日志数据。
本实施例一个可选的实施方式中,日志服务器106进一步被配置为:
生成用于日志数据存储的配置文件,配置文件中包括日志类型和存储地址之间的对应关系。
本实施例一个可选的实施方式中,日志服务器106进一步被配置为:
在配置文件中查找目标日志类型;
在查找到目标日志类型的情况下,将目标日志类型对应的存储地址确定为目标存储地址,将日志数据存储至目标存储地址;
在未查找到目标日志类型的情况下,不对日志数据进行存储。
本实施例一个可选的实施方式中,日志服务器106进一步被配置为:
接收输入的日志查询指令;
根据日志查询指令,查询对应的目标日志数据;
在查询到目标日志数据的情况下,返回目标日志数据;
在未查询到目标日志数据的情况下,返回查询失败的消息。
本实施例一个可选的实施方式中,日志服务器106进一步被配置为:
确定日志查询指令中携带的查询类型;
根据查询类型,确定对应的查询地址;
确定日志查询指令中携带的日志标识;
在查询地址中,查询日志标识对应的目标日志数据。
本说明书提供的日志存储系统包括:多个游戏服务器、游戏中心服务器和日志服务器,多个游戏服务器和游戏中心服务器进行通信连接,游戏中心服务器和日志服务器进行通信连接;多个游戏服务器中的任一游戏服务器,被配置为按照目标格式生成日志数据,并将日志数据发送给游戏中心服务器;游戏中心服务器,被配置为接收日志数据,并将日志数据发送给日志服务器;日志服务器,被配置为接收日志数据,并根据目标格式从日志数据的目标字段中读取目标日志类型,对日志数据进行分类存储。这种情况下,所有玩家的游戏行为(即日志数据)记录是通过一个独立的日志服务器,游戏服务器可以按照预先协议好的目标格式生成日志数据,由游戏中心服务器汇总后发送给日志服务器,日志服务器通过目标格式,可以直接在目标字段读取日志数据的日志类型,之后根据需求将不同类型的日志数据存储至不同的存储地址,从而使得后续其他工作人员可以直接通过日志服务器在相应的存储地址查询所需的日志数据,不需要运维人员介入,在提高日志数据的处理效率的基础上,避免了出错。
上述为本实施例的一种日志存储系统的示意性方案。需要说明的是,该日志存储系统的技术方案与下述图2所示的日志存储方法的技术方案属于同一构思,日志存储系统的技术方案未详细描述的细节内容,均可以参见下述图2所示的日志存储方法的技术方案的描述。
图2示出了根据本说明书一实施例提供的一种日志存储方法的流程图,具体包括以下步骤:
步骤202:游戏服务器按照目标格式生成日志数据,并将日志数据发送给游戏中心服务器。
实际应用中,在游戏运行过程中,游戏服务器会产生大量的日志数据,用来记录玩家的游戏行为,以供客服人员查询及开发人员进行挖掘分析等。目前各个游戏服务器产生大量的日志数据后,需要运维人员介入,按关键字对日志数据进行筛选和一系列的数据处理,之后再提供给其他工作人员(如客服人员、开发人员等)使用。然而,上述过程中,必须要运维人员介入,对日志数据进行筛选处理,其他工作人员才能使用日志数据,日志数据的处理效率低下,且依靠运维人员手动筛选处理,容易出错。
因而,本说明书中为了避免运维人员介入,从而提高效率,避免出错,提供了一种日志数据存储系统,该系统包括:多个游戏服务器、游戏中心服务器和日志服务器,多个游戏服务器和游戏中心服务器进行通信连接,游戏中心服务器和日志服务器进行通信连接;其中,多个游戏服务器中的任一游戏服务器,被配置为按照目标格式生成日志数据,并将日志数据发送给游戏中心服务器;游戏中心服务器,被配置为接收日志数据,并将日志数据发送给日志服务器;日志服务器,被配置为接收日志数据,并根据目标格式从日志数据的目标字段中读取目标日志类型,对日志数据进行分类存储。这种情况下,所有玩家的游戏行为(即日志数据)记录是通过一个独立的日志服务器,游戏服务器可以按照预先协议好的目标格式生成日志数据,由游戏中心服务器汇总后发送给日志服务器,日志服务器通过目标格式,可以直接在目标字段读取日志数据的日志类型,之后根据需求将不同类型的日志数据存储至不同的存储地址,从而使得后续其他工作人员可以直接通过日志服务器在相应的存储地址查询所需的日志数据。
需要说明的是,游戏服务器是指供游戏正常运行,对游戏数据进行存储、维护和管理的服务器,游戏服务器会和游戏客户端连接,从而对玩家通过操作游戏客户端完成的游戏行为进行记录管理,并根据游戏行为生成日志数据。游戏中心服务器和游戏服务器连接,用于接收并汇总游戏服务器发送的日志数据,然后转发给日志服务器,由单独的日志服务器对接收到的各个日志数据进行分类存储。
具体的,目标格式是指生成日志数据的格式,为了便于后续日志服务器可以按照日志数据的类型对日志数据进行分类存储,该目标格式至少应该包括日志类型以及日志类型在日志数据中的目标字段,该目标字段就是日志类型在日志数据中所处的位置,从而便于后续日志服务器直接在目标字段中找到日志类型,分类型进行存储。
本实施例一个可选的实施方式中,需要在游戏正常运行之前,在游戏服务器中预先设置目标格式,从而使得后续游戏运行过程中,可以根据预先设置的目标格式生成日志数据,具体实现过程可以如下:
接收日志生成协议,该日志生成协议定义日志数据生成的目标格式,该目标格式至少包括日志类型以及日志类型在日志数据中的目标字段;
根据日志生成协议生成日志数据。
需要说明的是,游戏服务器可以预先接收工作人员输入的日志生成协议,该日志生成协议用于定义日志数据生成的目标格式。该目标格式可以包括日志数据中包括的各个日志信息以及各个日志信息在日志数据中的目标字段,该日志信息至少包括日志类型,除此之外,还可以包括玩家游戏账号名称、角色名称、角色ID以及自定义内容中的一项或多项,也即是,目标格式可以规定日志数据包括的各个信息在日志数据中所处的位置。其中,自定义内容可以为玩家等级、玩家资金、玩家最后登录时间等。
例如,接收的日志生成协议如图3所示,该日志生成协议定义的目标格式为日志数据的第一字段为日志类型、第二字段为玩家游戏账号名称、第三字段为角色名称、第四字段为角色标识(ID)、第五字段为自定义内容。假设玩家X最后于15:00登录了角色A,该角色A的角色ID为aa,若此时游戏服务器要根据该游戏行为生成一个类型为100(玩家登录类型)的日志数据1,则可以将100放在第一字段、将玩家X放在第二字段、将角色A放在第三字段、将aa放在第四字段、将15:00(自定义内容为玩家最后登录时间)放在第五字段,根据上述五个字段可以生成类型为100的日志数据1。
值得说明的是,本说明书中可以在游戏服务器中预先定义日志数据生成的目标格式,使得游戏服务器可以根据该目标格式生成日志数据,为后续日志服务器自动根据日志类型,对日志数据进行分类存储打下了基础,便于实现无需运维人员介入,日志服务器直接自动分类型存储。
步骤204:游戏中心服务器接收日志数据,并将日志数据发送给日志服务器。
具体的,在游戏服务器按照目标格式生成日志数据,并将日志数据发送给游戏中心服务器的基础上,进一步的,游戏中心服务器接收日志数据,并将日志数据发送给日志服务器。
需要说明的是,游戏服务器并没有直接和日志服务器相连接,而是通过游戏中心服务器和日志服务器相连接,因而游戏服务器需要将生成的日志数据发送给游戏中心服务器,游戏中心服务器可以汇总各个与其相连接的游戏服务器发送的日志数据,并将日志数据转发给日志服务器。
本实施例一个可选的实施方式中,游戏中心服务器可以在接收到一个日志数据后,立即将该日志数据转发给日志服务器;或者,游戏中心服务器也可以每隔预设时长转发一次日志数据,即每隔预设时长,游戏服务器将该预设时长内接收到日志数据一起批量转发给日志服务;或者,游戏中心服务器还可以在日志数量达到数量阈值时,再将日志数据一起批量转发给日志服务器,即游戏中心服务器可以设置一个计数器,每接收到一个日志数据,计数器加1,直至计数器达到数量阈值,再将日志数据一起批量转发给日志服务器。其中,预设时长可以预先设置,例如5分钟、1小时、1天等;数量阈值也可以预先设置,如100、200、300等。
值得说明的是,本说明书中日志服务器无需和多个游戏服务器相连接,只需要和一个游戏中心服务器相连接,即可获取到多个游戏服务器的日志数据,提高了日志服务器的稳定性。并且,由于多个游戏服务器的日志数据会先发送至游戏中心服务器进行汇总,再转发至日志服务器,因而若任一游戏服务器宕机,不会影响其他游戏服务器和游戏中心服务器的交互,也不会影响游戏中心服务器和日志服务器之间的交互,不同游戏服务器之间不会相互影响,整个日志发送、存储流程更稳定。
步骤206:日志服务器接收日志数据,并根据目标格式从日志数据的目标字段中读取目标日志类型,对日志数据进行分类存储。
具体的,在游戏中心服务器接收日志数据,并将日志数据发送给日志服务器的基础上,进一步的,日志服务器将接收日志数据,并根据目标格式从日志数据的目标字段中读取目标日志类型,对日志数据进行分类存储。
需要说明的是,游戏服务器是按照目标格式生成的日志数据,因而日志服务器可以直接根据目标格式从日志数据的目标字段快速读取目标日志类型,其中,目标字段是指目标格式中日志类型所处的字段,目标日志类型是指该日志数据的日志类型。
本实施例一个可选的实施方式中,为了使日志服务器可以根据目标格式从日志数据的目标字段中读取目标日志类型,日志服务器中应该也预先存储和游戏服务器相同的目标格式,具体的,日志服务器可以接收日志生成协议,该日志生成协议定义日志数据生成的目标格式,且该日志生成协议与游戏服务器接收的日志生成协议相同。
沿用上例,日志服务器接收到了日志数据1,则可以根据如图3所示的目标格式,从日志数据1的第一字段中读取到目标日志类型为100,即日志数据1的日志类型为100。
进一步的,为了实现可以按照日志类型对不同的日志数据进行分类存储,日志服务器中还应该预先存储有日志类型和存储地址之间的对应关系,具体实现过程可以如下:
生成用于日志数据存储的配置文件,该配置文件中包括日志类型和存储地址之间的对应关系。
例如,假设有2个存储地址,一个为数据库,一个为文件,日志类型为100的日志数据需要在数据库和文件中均进行存储,而日志类型为101的日志数据,只需要在数据库中进行存储,此时生成的配置文件如图4所示,其中1代表存储,0代表不存储。
本实施例一个可选的实施方式中,在日志服务器根据目标格式从日志数据的目标字段中读取目标日志类型之后,就可以根据配置文件中包括的日志类型和存储地址之间的对应关系,将该日志数据存储至对应的存储地址中,具体实现过程可以如下:
在配置文件中查找目标日志类型;
在查找到目标日志类型的情况下,将目标日志类型对应的存储地址确定为目标存储地址,将日志数据存储至目标存储地址;
在未查找到目标日志类型的情况下,不对日志数据进行存储。
需要说明的是,有些类型的日志数据是后期客服人员或开发人员可能会用到的数据,此日志类型一般会在配置文件中设置,因而可以将该日志数据存储至配置文件中记录的存储地址中;而有些类型的日志数据则是一些无用的冗余数据,此日志类型一般不会在配置文件中设置,可以不进行存储记录。
沿用上例,日志数据1的日志类型为100,在如图4所示的配置文件中查找到100对应的存储地址为数据库和文件,此时将该日志数据1存储至数据库和文件中。假设又接收到了一个日志数据2,根据目标格式从日志数据2的目标字段中读取的目标日志类型为101,在如图4所示的配置文件中查找到101对应的存储地址为数据库,此时将该日志数据2存储至数据库中。假设还接收到了一个日志数据3,根据目标格式从日志数据3的目标字段中读取的目标日志类型为105,在如图4所示的配置文件中查找不到105,因而不对日志数据3进行存储。
值得说明的是,本说明书在根据目标格式从日志数据的目标字段中读取目标日志类型之后,对于配置文件不存在的日志类型对应的日志数据,无需进行存储,节省了日志服务器的存储空间,降低了日志服务器的存储压力。
另外,日志服务器在根据确定出的目标日志类型,将日志数据存储至对应的存储地址时,不仅仅会单独存储日志数据,还会对应存储日志数据的标识以供后续查询。
更进一步的,当工作人员需要使用日志数据时,可以直接通过日志服务器进行查询,具体实现过程如下:
接收输入的日志查询指令;
根据日志查询指令,查询对应的目标日志数据;
在查询到目标日志数据的情况下,返回目标日志数据;
在未查询到目标日志数据的情况下,返回查询失败的消息。
具体的,日志查询指令可以是工作人员通过预设查询操作触发的指令,该日志查询指令用于查询工作人员需要的日志数据,其中,预设查询操作可以是输入日志标识之后点击搜索控件的指令,也可以是选择时间周期后点击的导出指令等,本说明书中不对预设查询操作进行限制。
具体实现时,可以先确定日志查询指令中携带的查询类型,并根据查询类型,确定对应的查询地址,然后再确定日志查询指令中携带的日志标识,并在该查询地址中,查询该日志标识对应的目标日志数据。其中,查询地址和上述存储日志数据的存储地址相同。
沿用上例,假设接收到的日志查询指令携带的查询类型为类型1和标识1(日志数据1对应的日志标识),类型1对应的查询地址为数据库,则在数据库中查询标识1,由于日志数据1存储在了数据库中,因而可以查找到标识1对应的日志数据1,从而返回日志数据1;假设接收到的日志查询指令携带的查询类型为类型2和标识2(日志数据2对应的日志标识),类型2对应的查询地址为文件,则在文件中查询标识2,由于日志数据2只存储在了数据库中,因而无法在文件中查找到标识2对应的日志数据,此时返回查询失败的消息。
本说明书提供的日志存储方法,游戏服务器可以按照目标格式生成日志数据,并将日志数据发送给游戏中心服务器;游戏中心服务器可以接收日志数据,并将日志数据发送给日志服务器;日志服务器可以接收日志数据,并根据目标格式从日志数据的目标字段中读取目标日志类型,对日志数据进行分类存储。这种情况下,所有玩家的游戏行为(即日志数据)记录是通过一个独立的日志服务器,游戏服务器可以按照预先协议好的目标格式生成日志数据,由游戏中心服务器汇总后发送给日志服务器,日志服务器通过目标格式,可以直接在目标字段读取日志数据的日志类型,之后根据需求将不同类型的日志数据存储至不同的存储地址,从而使得后续其他工作人员可以直接通过日志服务器在相应的存储地址查询所需的日志数据,不需要运维人员介入,在提高日志数据的处理效率的基础上,避免了出错。
图5示出了本说明书一实施例提供的一种应用于日志存储系统中的日志服务器的日志存储方法的流程图,具体包括以下步骤:
步骤502:生成用于日志数据存储的配置文件,该配置文件中包括日志类型和存储地址之间的对应关系。
步骤504:接收游戏中心服务器发送的日志数据,该日志数据为游戏服务器按照目标格式生成并发送给游戏中心服务器的日志数据。
步骤506:根据目标格式从日志数据的目标字段中读取目标日志类型。
步骤508:在该配置文件中查找目标日志类型;在查找到目标日志类型的情况下,将目标日志类型对应的存储地址确定为目标存储地址,将日志数据存储至目标存储地址;在未查找到目标日志类型的情况下,不对日志数据进行存储。
接下来,参见图6,对上述步骤504-508所述的日志数据的存储流程进行示意:
假设配置文件如图4所示,存储地址包括数据库和文件。
日志服务器接收到一个日志数据后,从日志数据的目标字段中读取目标日志类型,根据目标日志类型判断是否需要存储至数据库,若是,则将该日志数据存储至数据库,并进一步判断是否需要存储至文件;若否,则进一步判断是否需要存储至文件。若是,则将该日志数据存储至文件,若否,则不进行存储。
需要说明的是,在日志服务器将接收到的日志数据存储至对应的存储地址后,工作人员可以按照如下步骤510通过日志服务器进行查询。
步骤510:接收输入的日志查询指令,确定日志查询指令中携带的查询类型,并根据查询类型,确定对应的查询地址;确定日志查询指令中携带的日志标识,并在查询地址中,查询日志标识对应的目标日志数据;在查询到目标日志数据的情况下,返回目标日志数据;在未查询到目标日志数据的情况下,返回查询失败的消息。
本说明书提供的日志存储方法,日志服务器可以接收游戏中心服务器发送的日志数据,该日志数据为游戏服务器按照目标格式生成并发送给游戏中心服务器的日志数据;然后根据目标格式从日志数据的目标字段中读取目标日志类型,对该日志数据进行分类存储。这种情况下,所有玩家的游戏行为(即日志数据)记录是通过一个独立的日志服务器,游戏服务器可以按照预先协议好的目标格式生成日志数据,由游戏中心服务器汇总后发送给日志服务器,日志服务器通过目标格式,可以直接在目标字段读取日志数据的日志类型,之后根据需求将不同类型的日志数据存储至不同的存储地址,从而使得后续其他工作人员可以直接通过日志服务器在相应的存储地址查询所需的日志数据,不需要运维人员介入,在提高日志数据的处理效率的基础上,避免了出错。
上述为本实施例提供的一种应用于日志存储系统中的日志服务器的日志存储方法的示意性方案。需要说明的是,该日志存储方法的技术方案与上述图2所示的日志存储方法的技术方案属于同一构思,该日志存储方法的技术方案未详细描述的细节内容,均可以参见上述图2所示的日志存储方法的技术方案的描述。
图7示出了根据本说明书一实施例提供的一种计算设备700的结构框图。该计算设备700的部件包括但不限于存储器710和处理器720。处理器720与存储器710通过总线730相连接,数据库750用于保存数据。
计算设备700还包括接入设备740,接入设备740使得计算设备700能够经由一个或多个网络760通信。这些网络的示例包括公用交换电话网(PSTN)、局域网(LAN)、广域网(WAN)、个域网(PAN)或诸如因特网的通信网络的组合。接入设备740可以包括有线或无线的任何类型的网络接口(例如,网络接口卡(NIC))中的一个或多个,诸如IEEE802.11无线局域网(WLAN)无线接口、全球微波互联接入(Wi-MAX)接口、以太网接口、通用串行总线(USB)接口、蜂窝网络接口、蓝牙接口、近场通信(NFC)接口,等等。
在本说明书的一个实施例中,计算设备700的上述部件以及图7中未示出的其他部件也可以彼此相连接,例如通过总线。应当理解,图7所示的计算设备结构框图仅仅是出于示例的目的,而不是对本说明书范围的限制。本领域技术人员可以根据需要,增添或替换其他部件。
计算设备700可以是任何类型的静止或移动计算设备,包括移动计算机或移动计算设备(例如,平板计算机、个人数字助理、膝上型计算机、笔记本计算机、上网本等)、移动电话(例如,智能手机)、可佩戴的计算设备(例如,智能手表、智能眼镜等)或其他类型的移动设备,或者诸如台式计算机或PC的静止计算设备。计算设备700还可以是移动式或静止式的服务器。
其中,处理器720用于执行如下计算机可执行指令:
接收游戏中心服务器发送的日志数据,所述日志数据为游戏服务器按照目标格式生成并发送给所述游戏中心服务器的日志数据;
根据所述目标格式从所述日志数据的目标字段中读取目标日志类型;
对所述日志数据进行分类存储。
上述为本实施例的一种计算设备的示意性方案。需要说明的是,该计算设备的技术方案与上述的图5所示的日志存储方法的技术方案属于同一构思,计算设备的技术方案未详细描述的细节内容,均可以参见上述图5所示的日志存储方法的技术方案的描述。
本说明书一实施例还提供一种计算机可读存储介质,其存储有计算机指令,该指令被处理器执行时以用于实现下述方法:
接收游戏中心服务器发送的日志数据,所述日志数据为游戏服务器按照目标格式生成并发送给所述游戏中心服务器的日志数据;
根据所述目标格式从所述日志数据的目标字段中读取目标日志类型;
对所述日志数据进行分类存储。
上述为本实施例的一种计算机可读存储介质的示意性方案。需要说明的是,该存储介质的技术方案与上述图5所示的日志存储方法的技术方案属于同一构思,存储介质的技术方案未详细描述的细节内容,均可以参见上述图5所示的日志存储方法的技术方案的描述。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
所述计算机指令包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本说明书并不受所描述的动作顺序的限制,因为依据本说明书,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本说明书所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上公开的本说明书优选实施例只是用于帮助阐述本说明书。可选实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本说明书的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本说明书的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本说明书。本说明书仅受权利要求书及其全部范围和等效物的限制。

Claims (14)

1.一种日志存储系统,其特征在于,所述系统包括:多个游戏服务器、游戏中心服务器和日志服务器,所述多个游戏服务器和所述游戏中心服务器进行通信连接,所述游戏中心服务器和所述日志服务器进行通信连接;
所述多个游戏服务器中的任一游戏服务器,被配置为按照目标格式生成日志数据,并将所述日志数据发送给所述游戏中心服务器;
所述游戏中心服务器,被配置为接收所述日志数据,并将所述日志数据发送给所述日志服务器;
所述日志服务器,被配置为接收所述日志数据,并根据所述目标格式从所述日志数据的目标字段中读取目标日志类型,对所述日志数据进行分类存储。
2.根据权利要求1所述的日志存储系统,其特征在于,所述游戏服务器进一步被配置为:
接收日志生成协议,所述日志生成协议定义日志数据生成的目标格式,所述目标格式至少包括日志类型以及所述日志类型在日志数据中的目标字段;
根据所述日志生成协议生成日志数据。
3.根据权利要求1所述的日志存储系统,其特征在于,所述日志服务器进一步被配置为:
生成用于日志数据存储的配置文件,所述配置文件中包括日志类型和存储地址之间的对应关系。
4.根据权利要求3所述的日志存储系统,其特征在于,所述日志服务器进一步被配置为:
在所述配置文件中查找所述目标日志类型;
在查找到所述目标日志类型的情况下,将所述目标日志类型对应的存储地址确定为目标存储地址,将所述日志数据存储至所述目标存储地址;
在未查找到所述目标日志类型的情况下,不对所述日志数据进行存储。
5.根据权利要求1所述的日志存储系统,其特征在于,所述日志服务器进一步被配置为:
接收输入的日志查询指令;
根据所述日志查询指令,查询对应的目标日志数据;
在查询到所述目标日志数据的情况下,返回所述目标日志数据;
在未查询到所述目标日志数据的情况下,返回查询失败的消息。
6.根据权利要求5所述的日志存储系统,其特征在于,所述日志服务器进一步被配置为:
确定所述日志查询指令中携带的查询类型;
根据所述查询类型,确定对应的查询地址;
确定所述日志查询指令中携带的日志标识;
在所述查询地址中,查询所述日志标识对应的目标日志数据。
7.一种日志存储方法,其特征在于,所述方法包括:
游戏服务器按照目标格式生成日志数据,并将所述日志数据发送给游戏中心服务器;
所述游戏中心服务器接收所述日志数据,并将所述日志数据发送给日志服务器;
所述日志服务器接收所述日志数据,并根据所述目标格式从所述日志数据的目标字段中读取目标日志类型,对所述日志数据进行分类存储。
8.一种日志存储方法,其特征在于,应用于日志存储系统中的日志服务器,所述方法包括:
接收游戏中心服务器发送的日志数据,所述日志数据为游戏服务器按照目标格式生成并发送给所述游戏中心服务器的日志数据;
根据所述目标格式从所述日志数据的目标字段中读取目标日志类型;
对所述日志数据进行分类存储。
9.根据权利要求8所述的日志存储方法,其特征在于,所述接收游戏中心服务器发送的日志数据之前,还包括:
生成用于日志数据存储的配置文件,所述配置文件中包括日志类型和存储地址之间的对应关系。
10.根据权利要求9所述的日志存储方法,其特征在于,所述对所述日志数据进行分类存储,包括:
在所述配置文件中查找所述目标日志类型;
在查找到所述目标日志类型的情况下,将所述目标日志类型对应的存储地址确定为目标存储地址,将所述日志数据存储至所述目标存储地址;
在未查找到所述目标日志类型的情况下,不对所述日志数据进行存储。
11.根据权利要求8所述的日志存储方法,其特征在于,所述对所述日志数据进行分类存储之后,还包括:
接收输入的日志查询指令;
根据所述日志查询指令,查询对应的目标日志数据;
在查询到所述目标日志数据的情况下,返回所述目标日志数据;
在未查询到所述目标日志数据的情况下,返回查询失败的消息。
12.根据权利要求11所述的日志存储方法,其特征在于,所述根据所述日志查询指令,查询对应的目标日志数据,包括:
确定所述日志查询指令中携带的查询类型;
根据所述查询类型,确定对应的查询地址;
确定所述日志查询指令中携带的日志标识;
在所述查询地址中,查询所述日志标识对应的目标日志数据。
13.一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,以实现下述方法:
接收游戏中心服务器发送的日志数据,所述日志数据为游戏服务器按照目标格式生成并发送给所述游戏中心服务器的日志数据;
根据所述目标格式从所述日志数据的目标字段中读取目标日志类型;
对所述日志数据进行分类存储。
14.一种计算机可读存储介质,其存储有计算机指令,该指令被处理器执行时实现权利要求8至12任意一项所述日志存储方法的步骤。
CN202011120092.9A 2020-10-19 2020-10-19 日志存储系统及方法 Pending CN112214465A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011120092.9A CN112214465A (zh) 2020-10-19 2020-10-19 日志存储系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011120092.9A CN112214465A (zh) 2020-10-19 2020-10-19 日志存储系统及方法

Publications (1)

Publication Number Publication Date
CN112214465A true CN112214465A (zh) 2021-01-12

Family

ID=74055931

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011120092.9A Pending CN112214465A (zh) 2020-10-19 2020-10-19 日志存储系统及方法

Country Status (1)

Country Link
CN (1) CN112214465A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112925757A (zh) * 2021-03-26 2021-06-08 广东好太太智能家居有限公司 一种追踪智能设备操作日志的方法、设备、存储介质
CN112988798A (zh) * 2021-03-29 2021-06-18 成都卫士通信息产业股份有限公司 一种日志处理方法、装置、设备及介质
CN113094348A (zh) * 2021-03-19 2021-07-09 北京达佳互联信息技术有限公司 日志管理方法及装置
CN113420003A (zh) * 2021-06-30 2021-09-21 中国航空油料有限责任公司 一种数据交互日志的处理方法、装置、设备及介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101958837A (zh) * 2010-09-30 2011-01-26 北京世纪互联工程技术服务有限公司 日志处理系统、日志处理方法、节点服务器和中心服务器
CN102780777A (zh) * 2012-07-19 2012-11-14 北京蓝汛通信技术有限责任公司 一种日志收集方法及系统
US20160085772A1 (en) * 2014-09-19 2016-03-24 Amazon Technologies, Inc. Automated configuration of log-coordinated storage groups
CN107622084A (zh) * 2017-08-10 2018-01-23 深圳前海微众银行股份有限公司 日志管理方法、系统以及计算机可读存储介质
CN109885546A (zh) * 2019-02-15 2019-06-14 北京金山云网络技术有限公司 行为日志存储方法、装置及电子设备
WO2019140828A1 (zh) * 2018-01-17 2019-07-25 平安科技(深圳)有限公司 电子装置、分布式系统日志查询方法及存储介质
CN111198861A (zh) * 2020-01-07 2020-05-26 北京字节跳动网络技术有限公司 逻辑日志的处理方法、装置及电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101958837A (zh) * 2010-09-30 2011-01-26 北京世纪互联工程技术服务有限公司 日志处理系统、日志处理方法、节点服务器和中心服务器
CN102780777A (zh) * 2012-07-19 2012-11-14 北京蓝汛通信技术有限责任公司 一种日志收集方法及系统
US20160085772A1 (en) * 2014-09-19 2016-03-24 Amazon Technologies, Inc. Automated configuration of log-coordinated storage groups
CN107622084A (zh) * 2017-08-10 2018-01-23 深圳前海微众银行股份有限公司 日志管理方法、系统以及计算机可读存储介质
WO2019140828A1 (zh) * 2018-01-17 2019-07-25 平安科技(深圳)有限公司 电子装置、分布式系统日志查询方法及存储介质
CN109885546A (zh) * 2019-02-15 2019-06-14 北京金山云网络技术有限公司 行为日志存储方法、装置及电子设备
CN111198861A (zh) * 2020-01-07 2020-05-26 北京字节跳动网络技术有限公司 逻辑日志的处理方法、装置及电子设备

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
DJU ALEX: "基于Flume的美团日志收集系统(一)架构和设计", Retrieved from the Internet <URL:https://tech.meituan.com/2013/12/09/meituan-flume-log-system-architecture-and-design.html> *
刘雪梅: "服务器端软件性能分析和诊断", 31 July 2011, 北京邮电大学出版社, pages: 53 - 54 *
王倩,等: "大数据技术原理与操作应用", 31 August 2020, 重庆大学出版社, pages: 201 *
黄源,等: "大数据技术与应用", 31 May 2020, 机械工业出版社, pages: 80 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113094348A (zh) * 2021-03-19 2021-07-09 北京达佳互联信息技术有限公司 日志管理方法及装置
CN113094348B (zh) * 2021-03-19 2024-02-23 北京达佳互联信息技术有限公司 日志管理方法及装置
CN112925757A (zh) * 2021-03-26 2021-06-08 广东好太太智能家居有限公司 一种追踪智能设备操作日志的方法、设备、存储介质
CN112988798A (zh) * 2021-03-29 2021-06-18 成都卫士通信息产业股份有限公司 一种日志处理方法、装置、设备及介质
CN112988798B (zh) * 2021-03-29 2023-05-23 成都卫士通信息产业股份有限公司 一种日志处理方法、装置、设备及介质
CN113420003A (zh) * 2021-06-30 2021-09-21 中国航空油料有限责任公司 一种数据交互日志的处理方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN112214465A (zh) 日志存储系统及方法
CN110096517B (zh) 基于分布式系统的缓存数据的监控方法、装置和系统
CN110598280B (zh) 一种设备仿真系统和方法、计算机可读存储介质
CN111090440B (zh) 信息处理方法、系统、设备及存储介质
CN112052247B (zh) 搜索引擎的索引更新系统、方法、装置、电子设备、存储介质
CN111723313A (zh) 页面跳转的处理方法、装置、设备及存储介质
CN105512283A (zh) 数据质量管理控制方法及装置
CN111198976B (zh) 云上资产关联分析系统、方法、电子设备及介质
KR102339897B1 (ko) 보고서 자동 생성 기반의 업무 프로세스 관리 시스템 제공 방법
CN112347165A (zh) 日志处理方法、装置及服务器和计算机可读存储介质
CN116226786B (zh) 一种用于信息系统数据融合的数据处理方法及装置
US20190362010A1 (en) Epsilon-closure for frequent pattern analysis
US7730019B1 (en) System and method for data collection, management, and analysis
CN115033639A (zh) 一种生成集群间数据共享的关系图的方法和相关装置
CN112612929A (zh) 数据处理方法及装置
CN111008209A (zh) 数据的对账方法、装置及系统、存储介质、电子装置
US12105725B2 (en) Automatic determination of alternative paths for a process flow using machine learning
CN115905151A (zh) 基于备份日志的流转信息查询方法、系统和装置
CN111612530A (zh) 一种推广内容的曝光控制方法、装置及计算机设备
CN111625711A (zh) 新上房源的推送处理方法、装置、电子设备及存储介质
CN112925686A (zh) 数据采集方法、服务器、系统及存储介质
CN109684158A (zh) 分布式协调系统的状态监控方法、装置、设备及存储介质
US12047451B2 (en) IoT system and data collection control method
CN116319645B (zh) 消息发送方法、装置、计算机设备及计算机可读存储介质
CN114676166A (zh) 数据处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination