CN112667578A - 一种游戏日志数据实时处理方法 - Google Patents
一种游戏日志数据实时处理方法 Download PDFInfo
- Publication number
- CN112667578A CN112667578A CN202011587409.XA CN202011587409A CN112667578A CN 112667578 A CN112667578 A CN 112667578A CN 202011587409 A CN202011587409 A CN 202011587409A CN 112667578 A CN112667578 A CN 112667578A
- Authority
- CN
- China
- Prior art keywords
- log data
- game
- game log
- data
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种游戏日志数据实时处理方法，所述实时处理方法包括如下步骤：游戏日志数据分类，游戏日志数据获取，从文件系统中以行级获取每个监控组的流数据，游戏日志数据存储，将S2步骤中获取的所述流数据存储至数据库内，游戏日志数据处理，游戏日志数据处理结果统计显示，将S4步骤中获得的游戏日志数据进行指示统计运算，得到指标统计结果，并在显示设备上进行显示。本发明以流数据的形式输入输出数据，便于对较多的数据进行实时处理，运算时间短，运行速度快，且处理游戏日志数据的设备运行时的成本较低，便于对游戏的运情况进行实时的评测，便于对游戏的运营情况和服务器的负载情况等指标进行实时了解。
Description
技术领域
本发明涉及一种处理方法，具体是一种游戏日志数据实时处理方法。
背景技术
日志文件是用于记录系统操作事件的记录文件或文件集合，可分为事件日志和消息日志。事件日志记录在系统的执行中发生的事件，以便提供可用于理解系统的活动和诊断问题的跟踪，它们对理解复杂系统的活动至关重要，特别是在用户交互较少的应用程序中，在计算机中日志文件是记录在操作系统或其他软件运行中发生的事件或在通信软件的不同用户之间的消息的文件，记录是保持日志的行为。
目前用于处理游戏日志数据的方法较为繁琐，运算时间长，对处理游戏日志数据的设备有较高的要求，设备运行时的成本较高。因此，针对上述问题提出一种游戏日志数据实时处理方法。
发明内容
一种游戏日志数据实时处理方法，所述实时处理方法包括如下步骤：
S1、游戏日志数据分类，根据不同的服务器类型和玩家群体类型将游戏服务器的游戏日志数据分类成不同的小组，并利用不同的监控组进行监控；
S2、游戏日志数据获取，从文件系统中以行级获取每个监控组的流数据；
S3、游戏日志数据存储，将S2步骤中获取的所述流数据存储至数据库内；
S4、游戏日志数据处理，分别针对每个监控组的游戏日志数据进行处理分析，得到基于服务器类型和玩家群体类型的游戏日志数据，并对游戏日志数据进行监控；
S5、游戏日志数据处理结果统计显示，将S4步骤中获得的游戏日志数据进行指示统计运算，得到指标统计结果，并在显示设备上进行显示。
进一步地，所述S1步骤中服务器类型根据游戏服务器的等级和游戏服务器导入玩家所使用的设备的机型确定。
进一步地，所述游戏服务器的等级由服务器开通时间的长短确定，且所述游戏服务器开通的时间越长对应的服务器类型的等级越高。
进一步地，所述S1步骤中玩家群体类型通过玩家的游戏角色职业和等级、玩家付费的数量和玩家所在地区进行确定。
进一步地，所述S3步骤中的存储包括本地存储和网上存储，所述网上存储是备份存储，用于本体存储损坏后使用。
进一步地，所述S4步骤中游戏日志数据处理包括对游戏日志数据进行转换，得到具有统一日志类型的游戏运营数据，并将不满足业务条件的数据进行过滤，得到具有一致性的运营数据。
进一步地，所述S4步骤中对游戏日志数据进行监控包括监控游戏日志数据是否出现错误的日志数据，并对错误的日志数据进行存储和报警。
进一步地，所述S4步骤中对游戏日志数据进行处理和S5步骤中对游戏日志数据处理结果统计均以单进程多线程方式进行。
进一步地，所述S3步骤中的数据库类型为HBase数据库，所述游戏日志数据包括游戏中的经济和货币数据、登入或退出游戏服务器的时间和位置数据以及游戏道具获得和消耗的数据等。
进一步地，所述S5步骤中显示设备包括显示屏设备、数据导出设备和打印设备。
本发明的有益效果是：本发明提供了一种游戏日志数据实时处理方法。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1为本发明一种实施例的整体流程示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
实施例一：
请参阅图1所示，一种游戏日志数据实时处理方法，所述实时处理方法包括如下步骤：
S1、游戏日志数据分类，根据不同的服务器类型和玩家群体类型将游戏服务器的游戏日志数据分类成不同的小组，并利用不同的监控组进行监控；
S2、游戏日志数据获取，从文件系统中以行级获取每个监控组的流数据；
S3、游戏日志数据存储，将S2步骤中获取的所述流数据存储至数据库内；
S4、游戏日志数据处理，分别针对每个监控组的游戏日志数据进行处理分析，得到基于服务器类型和玩家群体类型的游戏日志数据，并对游戏日志数据进行监控；
S5、游戏日志数据处理结果统计显示，将S4步骤中获得的游戏日志数据进行指示统计运算，得到指标统计结果，并在显示设备上进行显示。
进一步地，所述S1步骤中服务器类型根据游戏服务器的等级和游戏服务器导入玩家所使用的设备的机型确定，并对电脑端的服务器和手机端的服务器进行区分，对手机端的服务器游戏日志数据进行处理，对电脑端的服务器游戏日志数据进行存储并移交给适用于对电脑端游戏日志数据实时处理的系统进行处理。
进一步地，所述游戏服务器的等级由服务器开通时间的长短确定，且所述游戏服务器开通的时间越长对应的服务器类型的等级越高。
进一步地，所述S1步骤中玩家群体类型通过玩家的游戏角色职业和等级、玩家付费的数量和玩家所在地区进行确定。
进一步地，所述S3步骤中的存储包括本地存储和网上存储，所述网上存储是备份存储，用于本体存储损坏后使用。
进一步地，所述S4步骤中游戏日志数据处理包括对游戏日志数据进行转换，得到具有统一日志类型的游戏运营数据，并将不满足业务条件的数据进行过滤，得到具有一致性的运营数据。
进一步地，所述S4步骤中对游戏日志数据进行监控包括监控游戏日志数据是否出现错误的日志数据，并对错误的日志数据进行存储和报警。
进一步地，所述S4步骤中对游戏日志数据进行处理和S5步骤中对游戏日志数据处理结果统计均以单进程多线程方式进行。
进一步地，所述S3步骤中的数据库类型为HBase数据库，所述游戏日志数据包括游戏中的经济和货币数据、登入或退出游戏服务器的时间和位置数据以及游戏道具获得和消耗的数据等。
进一步地，所述S5步骤中显示设备包括显示屏设备、数据导出设备和打印设备。
上述实时处理方法主要适用于对手机端游戏日志数据进行实时处理。
实施例二：
请参阅图1所示，一种游戏日志数据实时处理方法，所述实时处理方法包括如下步骤：
S1、游戏日志数据分类，根据不同的服务器类型和玩家群体类型将游戏服务器的游戏日志数据分类成不同的小组，并利用不同的监控组进行监控；
S2、游戏日志数据获取，从文件系统中以行级获取每个监控组的流数据；
S3、游戏日志数据存储，将S2步骤中获取的所述流数据存储至数据库内；
S4、游戏日志数据处理，分别针对每个监控组的游戏日志数据进行处理分析，得到基于服务器类型和玩家群体类型的游戏日志数据，并对游戏日志数据进行监控；
S5、游戏日志数据处理结果统计显示，将S4步骤中获得的游戏日志数据进行指示统计运算，得到指标统计结果，并在显示设备上进行显示。
进一步地，所述S1步骤中服务器类型根据游戏服务器的等级和游戏服务器导入玩家所使用的设备的机型确定，并对电脑端的服务器和手机端的服务器进行区分，对电脑端的服务器游戏日志数据进行处理，对手机端的服务器游戏日志数据进行存储并移交给适用于对手机端游戏日志数据实时处理的系统进行处理。
进一步地，所述游戏服务器的等级由服务器开通时间的长短确定，且所述游戏服务器开通的时间越长对应的服务器类型的等级越高。
进一步地，所述S1步骤中玩家群体类型通过玩家的游戏角色职业和等级、玩家付费的数量和玩家所在地区进行确定。
进一步地，所述S3步骤中的存储包括本地存储和网上存储，所述网上存储是备份存储，用于本体存储损坏后使用。
进一步地，所述S4步骤中游戏日志数据处理包括对游戏日志数据进行转换，得到具有统一日志类型的游戏运营数据，并将不满足业务条件的数据进行过滤，得到具有一致性的运营数据。
进一步地，所述S4步骤中对游戏日志数据进行监控包括监控游戏日志数据是否出现错误的日志数据，并对错误的日志数据进行存储和报警。
进一步地，所述S4步骤中对游戏日志数据进行处理和S5步骤中对游戏日志数据处理结果统计均以单进程多线程方式进行。
进一步地，所述S3步骤中的数据库类型为HBase数据库，所述游戏日志数据包括游戏中的经济和货币数据、登入或退出游戏服务器的时间和位置数据以及游戏道具获得和消耗的数据等。
进一步地，所述S5步骤中显示设备包括显示屏设备、数据导出设备和打印设备。
上述实时处理方法主要适用于对电脑端游戏日志数据进行实时处理。
本发明的有益之处在于：
本发明以流数据的形式输入输出数据，便于对较多的数据进行实时处理，运算时间短，运行速度快，且处理游戏日志数据的设备运行时的成本较低，便于对游戏的运情况进行实时的评测，便于对游戏的运营情况和服务器的负载情况等指标进行实时了解。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (10)
1.一种游戏日志数据实时处理方法，其特征在于：所述实时处理方法包括如下步骤：
S1、游戏日志数据分类，根据不同的服务器类型和玩家群体类型将游戏服务器的游戏日志数据分类成不同的小组，并利用不同的监控组进行监控；
S2、游戏日志数据获取，从文件系统中以行级获取每个监控组的流数据；
S3、游戏日志数据存储，将S2步骤中获取的所述流数据存储至数据库内；
S4、游戏日志数据处理，分别针对每个监控组的游戏日志数据进行处理分析，得到基于服务器类型和玩家群体类型的游戏日志数据，并对游戏日志数据进行监控；
S5、游戏日志数据处理结果统计显示，将S4步骤中获得的游戏日志数据进行指示统计运算，得到指标统计结果，并在显示设备上进行显示。
2.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S1步骤中服务器类型根据游戏服务器的等级和游戏服务器导入玩家所使用的设备的机型确定。
3.根据权利要求2所述的一种游戏日志数据实时处理方法，其特征在于：所述游戏服务器的等级由服务器开通时间的长短确定，且所述游戏服务器开通的时间越长对应的服务器类型的等级越高。
4.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S1步骤中玩家群体类型通过玩家的游戏角色职业和等级、玩家付费的数量和玩家所在地区进行确定。
5.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S3步骤中的存储包括本地存储和网上存储，所述网上存储是备份存储，用于本体存储损坏后使用。
6.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S4步骤中游戏日志数据处理包括对游戏日志数据进行转换，得到具有统一日志类型的游戏运营数据，并将不满足业务条件的数据进行过滤，得到具有一致性的运营数据。
7.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S4步骤中对游戏日志数据进行监控包括监控游戏日志数据是否出现错误的日志数据，并对错误的日志数据进行存储和报警。
8.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S4步骤中对游戏日志数据进行处理和S5步骤中对游戏日志数据处理结果统计均以单进程多线程方式进行。
9.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S3步骤中的数据库类型为HBase数据库，所述游戏日志数据包括游戏中的经济和货币数据、登入或退出游戏服务器的时间和位置数据以及游戏道具获得和消耗的数据等。
10.根据权利要求1所述的一种游戏日志数据实时处理方法，其特征在于：所述S5步骤中显示设备包括显示屏设备、数据导出设备和打印设备。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011587409.XA CN112667578A (zh) | 2020-12-29 | 2020-12-29 | 一种游戏日志数据实时处理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011587409.XA CN112667578A (zh) | 2020-12-29 | 2020-12-29 | 一种游戏日志数据实时处理方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112667578A true CN112667578A (zh) | 2021-04-16 |
Family
ID=75411701
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011587409.XA Pending CN112667578A (zh) | 2020-12-29 | 2020-12-29 | 一种游戏日志数据实时处理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112667578A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115501610A (zh) * | 2022-09-26 | 2022-12-23 | 广州星火文化科技有限公司 | 一种游戏系统的异常数据处理方法及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105354133A (zh) * | 2015-09-28 | 2016-02-24 | 网易（杭州）网络有限公司 | 一种游戏日志数据的处理方法及装置 |
| CN105426292A (zh) * | 2015-10-29 | 2016-03-23 | 网易（杭州）网络有限公司 | 一种游戏日志实时处理系统及方法 |
| CN107707414A (zh) * | 2017-11-22 | 2018-02-16 | 北京搜狐新媒体信息技术有限公司 | Cdn网络的监控系统及方法 |
| CN108014496A (zh) * | 2016-11-01 | 2018-05-11 | 科尔赛特股份有限公司 | 游戏记录分析方法 |
-
2020
- 2020-12-29 CN CN202011587409.XA patent/CN112667578A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105354133A (zh) * | 2015-09-28 | 2016-02-24 | 网易（杭州）网络有限公司 | 一种游戏日志数据的处理方法及装置 |
| CN105426292A (zh) * | 2015-10-29 | 2016-03-23 | 网易（杭州）网络有限公司 | 一种游戏日志实时处理系统及方法 |
| CN108014496A (zh) * | 2016-11-01 | 2018-05-11 | 科尔赛特股份有限公司 | 游戏记录分析方法 |
| CN107707414A (zh) * | 2017-11-22 | 2018-02-16 | 北京搜狐新媒体信息技术有限公司 | Cdn网络的监控系统及方法 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115501610A (zh) * | 2022-09-26 | 2022-12-23 | 广州星火文化科技有限公司 | 一种游戏系统的异常数据处理方法及系统 |
| CN115501610B (zh) * | 2022-09-26 | 2023-05-05 | 广州星火文化科技有限公司 | 一种游戏系统的异常数据处理方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106940679B (zh) | 数据处理方法及装置 | |
| CN108764649A (zh) | 保险销售实时监控方法、装置、设备及存储介质 | |
| CN108737182A (zh) | 系统异常的处理方法及系统 | |
| CN104636240B (zh) | 一种信息报表的获取方法及终端 | |
| CN106453971B (zh) | 呼叫中心质检语音的获取方法和呼叫中心质检系统 | |
| CN109656792A (zh) | 基于网络调用日志的应用性能分析方法、装置、计算机设备及存储介质 | |
| CN110046073A (zh) | 一种日志采集方法及装置、设备、存储介质 | |
| CN108153587A (zh) | 一种针对大数据平台的慢任务原因检测方法 | |
| CN112148518A (zh) | 日志文件处理方法、装置、计算机设备和存储介质 | |
| CN106992886A (zh) | 一种基于分布式存储的日志分析方法及装置 | |
| CN114648393A (zh) | 一种应用于招投标的数据挖掘方法、系统及设备 | |
| CN111984495A (zh) | 一种大数据监控方法、装置和存储介质 | |
| CN103077207A (zh) | 一种微博开心指数分析方法及系统 | |
| CN107635003A (zh) | 系统日志的管理方法、装置及系统 | |
| CN112667578A (zh) | 一种游戏日志数据实时处理方法 | |
| CN106559498A (zh) | 风控数据收集平台及其收集方法 | |
| CN113507542B (zh) | 一种用于客服坐席的音视频在线巡检方法及系统 | |
| CN114971710A (zh) | 基于事件日志的多维度流程变体差异分析方法与系统 | |
| CN109614380A (zh) | 日志处理方法、系统、计算机设备及可读介质 | |
| CN109033330A (zh) | 大数据清洗方法、装置和服务器 | |
| CN109254892A (zh) | 一种生成报告的方法及装置 | |
| CN111737203A (zh) | 数据库历史日志回溯方法、装置、系统、设备及存储介质 | |
| CN111324583B (zh) | 一种业务日志的分类方法及装置 | |
| CN110175124A (zh) | 一种诊断Spark应用的方法及装置 | |
| CN113094245A (zh) | 一种数据库集群健康性度量的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |