CN104317811A - 业务指标的统计方法、装置及服务器 - Google Patents
业务指标的统计方法、装置及服务器 Download PDFInfo
- Publication number
- CN104317811A CN104317811A CN201410497412.0A CN201410497412A CN104317811A CN 104317811 A CN104317811 A CN 104317811A CN 201410497412 A CN201410497412 A CN 201410497412A CN 104317811 A CN104317811 A CN 104317811A
- Authority
- CN
- China
- Prior art keywords
- record data
- daily record
- time stamp
- operating time
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本公开是关于一种业务指标的统计方法、装置及服务器,该方法包括:实时接收终端设备上传的日志数据;获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;根据所述操作时间戳将所述日志数据保存在预设文件中;每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。该方案可以确保计算周期内的日志数据的准确性,能够及时满足用户的需求,提升用户体验。
Description
技术领域
本公开涉及网络技术领域,尤其涉及一种业务指标的统计方法、装置及服务器。
背景技术
移动互联网技术的飞速发展给用户提供了很大的便利,为了满足用户更多的需求,互联网服务提供商(Internet Service Provider,ISP)推出的项目和服务也越来越多,ISP可以统计业务指标来评估推出的项目和服务的效果,以及时进行项目决策和调整,从而达到更好的效果。推出的项目和服务不同,业务指标也不相同,例如,ISP在应用程序(Application,APP)中推出广告,ISP可以获取一段时间内该广告的点击次数,以决定是否继续投放该广告,该广告的点击次数就是业务指标。
相关技术中,业务指标的统计方法是,接收终端设备上传的日志数据,将接收到日志数据的时间默认为所对应操作行为发生的时间,然后确定计算时间段,根据该计算时间段内的日志数据统计业务指标。
上述方法中,将接收到日志数据的时间作为所对应操作行为发生的时间,受网络环境、用户操作习惯、终端设备的反应灵敏度等因素的影响,接收到日志数据的时间相对于所对应操作行为发生的时间可能会有很大的延迟,计算时间段内的日志数据并不是所对应操作行为发生时间的日志数据,计算时间段内的日志数据的准确性较差,这就会导致对业务指标的统计结果的正确性很低,影响ISP进一步的项目决策和调整,并且不能及时满足用户的需求,影响用户体验。
发明内容
为克服相关技术中存在的问题,本公开提供一种业务指标的统计方法、装置及服务器。
根据本公开实施例的第一方面,提供一种业务指标的统计方法,包括:
实时接收终端设备上传的日志数据;
获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;
根据所述操作时间戳将所述日志数据保存在预设文件中;
每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;
根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。
结合第一方面,在第一方面的第一种可能的实现方式中,所述获取所述日志数据的操作时间戳的步骤包括:
确定所述日志数据是否携带操作时间戳;
若所述日志数据携带操作时间戳,则解析所述日志数据,得到所述日志数据的操作时间戳;
若所述日志数据未携带操作时间戳,则确定所述日志数据是否携带上传时间戳;
若所述日志数据携带上传时间戳,则解析所述日志数据,得到所述上传时间戳,将所述上传时间戳确定作为所述日志数据的操作时间戳。
结合第一方面或者第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,所述根据所述操作时间戳将所述日志数据保存在预设文件中的步骤包括:
按照所述操作时间戳的时间先后顺序将所述日志数据保存在所述预设文件中。
结合第一方面的第二种可能的实现方式,在第一方面的第三种可能的实现方式中,所述从所述预设文件中获取校正时间窗口内的日志数据的步骤包括:
从所述预设文件中获取操作时间戳落在所述校正时间窗口内的日志数据。
结合第一方面或者第一方面的第一种可能的实现方式,在第一方面的第四种可能的实现方式中,所述根据所述操作时间戳将所述日志数据保存在预设文件中的步骤包括:
确定所述操作时间戳对应的计算周期;
在所述日志数据中添加确定出的计算周期的标识;
将添加计算周期的标识的所述日志数据保存在所述预设文件中。
结合第一方面的第四种可能的实现方式,在第一方面的第五种可能的实现方式中,所述从所述预设文件中获取校正时间窗口内的日志数据的步骤包括:
从所述预设文件中获取携带当前计算周期的标识的日志数据。
根据本公开实施例的第二方面,提供一种业务指标的统计装置,包括:
接收模块,用于实时接收终端设备上传的日志数据;
第一获取模块,用于获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;
保存模块,用于根据所述操作时间戳将所述日志数据保存在预设文件中;
第二获取模块,用于每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;
计算模块,用于根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。
结合第二方面,在第二方面的第一种可能的实现方式中,所述第一获取模块包括:
第一确定子模块,用于确定所述日志数据是否携带操作时间戳;
解析子模块,用于若所述日志数据携带操作时间戳,则解析所述日志数据,得到所述日志数据的操作时间戳;若所述日志数据未携带操作时间戳,则确定所述日志数据是否携带上传时间戳;若所述日志数据携带上传时间戳,则解析所述日志数据,得到所述上传时间戳,将所述上传时间戳确定作为所述日志数据的操作时间戳。
结合第二方面或者第二方面的第一种可能的实现方式,在第二方面的第二种可能的实现方式中,所述保存模块包括:
第一保存子模块,用于按照所述操作时间戳的时间先后顺序将所述日志数据保存在所述预设文件中。
结合第二方面的第二种可能的实现方式,在第二方面的第三种可能的实现方式中,所述第二获取模块包括:
第一获取子模块,用于从所述预设文件中获取操作时间戳落在所述校正时间窗口内的日志数据。
结合第二方面或者第二方面的第一种可能的实现方式,在第二方面的第四种可能的实现方式中,所述保存模块包括:
第二确定子模块,用于确定所述操作时间戳对应的计算周期;
添加子模块,用于在所述日志数据中添加确定出的计算周期的标识;
第二保存子模块,用于将添加计算周期的标识的所述日志数据保存在所述预设文件中。
结合第二方面的第四种可能的实现方式,在第二方面的第五种可能的实现方式中,所述第二获取模块包括:
第二获取子模块,用于从所述预设文件中获取携带当前计算周期的标识的日志数据。
根据本公开实施例的第三方面,提供一种服务器,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
实时接收终端设备上传的日志数据;
获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;
根据所述操作时间戳将所述日志数据保存在预设文件中;
每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;
根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。
本公开的实施例提供的技术方案可以包括以下有益效果:由于是根据日志数据的操作时间戳保存日志数据,而操作时间戳用于表征日志数据所对应操作行为的发生时间,从而可以确保计算周期内的日志数据的准确性;并且,由于每个计算周期内会获取校正时间窗内的日志数据,并根据获取的日志数据及其对应的操作时间戳对业务指标进行统计,而校正时间窗口的时间长度是计算周期的时间长度的设定倍数,这就使得每个计算周期到期时,校正时间窗口内都会有一部分日志数据是被重复计算的,随着日志数据的实时更新,收集的日志数据越来越多,相应地根据校正时间窗口内的日志数据针对业务指标的统计结果也越来越准确,从而可以进一步确保ISP进行项目决策和调整,能够及时满足用户的需求,提升用户体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种业务指标的统计方法的流程图。
图2是根据一示例性实施例示出的校正时间窗口、计算周期与当前时刻的时间序列示意图。
图3是根据一示例性实施例示出的一种业务指标的统计装置的框图。
图4是根据一示例性实施例示出的一种服务器的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种业务指标的统计方法的流程图,如图1所示,该方法用于服务器中,包括以下步骤。
在步骤S11中,实时接收终端设备上传的日志数据。
用户在终端设备执行浏览网页、购物、浏览新闻、搜索信息等等操作时,终端设备都会产生日志数据,ISP可以收集这些日志数据进行相关分析,例如,ISP需要确认关键词在一段时间内的搜索次数,从而确定关键词的排序时,就可以实时接收终端设备上传的日志数据,然后再进行相关分析。受网络环境、用户操作习惯、终端设备的反应灵敏度等因素的影响,终端设备上传的日志数据的时间不会是非常集中的,只要有终端设备上传日志数据,服务器就可以实时接收,从而可以确保最终分析结果的准确性。
在步骤S12中,获取日志数据的操作时间戳。
操作时间戳用于表征日志数据所对应操作行为的发生时间。
在步骤S13中,根据操作时间戳将日志数据保存在预设文件中。
终端设备上传的日志数据中通常会携带操作时间戳,可以获取实时接收到的日志数据的操作时间戳,然后依据日志数据中携带的操作时间戳来保存日志数据,日志数据可以但不限于保存在设定文件中,设定文件可以根据实际需要进行设定、存储和命名。
在步骤S14中,每个计算周期到期时,从预设文件中获取校正时间窗口内的日志数据,校正时间窗口的时间长度是计算周期的时间长度的设定倍数,校正时间窗口的结束时刻是当前计算周期到期的时刻。
可以设定计算周期,每个计算周期到期时统计业务指标,选取的日志数据是校正时间窗口内的日志数据,校正时间窗口的时间长度是计算周期的时间长度的设定倍数,校正时间窗口的结束时刻是当前计算周期到期的时刻。计算周期、设定倍数可以根据实际需要进行设定,例如计算周期可以设置为1天、2天、3天等等,设定倍数可以设定为1.5倍、2倍、2.5倍、3倍等等。
在步骤S15中,根据获取的日志数据以及获取的日志数据的操作时间戳对业务指标进行统计。
统计业务指标的方式可以根据获取的日志数据数量的多少来确定,例如,当获取的日志数据数量很少时,可以由服务器进行计算;当获取的日志数据数量很多时,可以由集群进行分布式计算,其中集群可以但不限于hadoop平台。
该方案中,由于是根据日志数据的操作时间戳保存日志数据,而操作时间戳用于表征日志数据所对应操作行为的发生时间,从而可以确保计算周期内的日志数据的准确性;并且,由于每个计算周期内会获取校正时间窗内的日志数据,并根据获取的日志数据及其对应的操作时间戳对业务指标进行统计,而校正时间窗口的时间长度是计算周期的时间长度的设定倍数,这就使得每个计算周期到期时,校正时间窗口内都会有一部分日志数据是被重复计算的,随着日志数据的实时更新,收集的日志数据越来越多,相应地根据校正时间窗口内的日志数据针对业务指标的统计结果也越来越准确,从而可以进一步确保ISP进行项目决策和调整,能够及时满足用户的需求,提升用户体验。
可选的,在S12中的获取日志数据的操作时间戳的步骤包括:
确定日志数据是否携带操作时间戳;
若日志数据携带操作时间戳,则解析日志数据,得到日志数据的操作时间戳;
若日志数据未携带操作时间戳,则确定日志数据是否携带上传时间戳;
若日志数据携带上传时间戳,则解析日志数据,得到上传时间戳,将上传时间戳确定作为日志数据的操作时间戳。
由于终端设备的差异,有的终端设备可以准确地在日志数据中携带操作时间戳来记录所对应操作行为发生的时间,但有的设备无法在日志数据中携带操作时间戳。若终端设备在日志数据中携带了操作时间戳,该操作时间戳就是日志数据的操作时间戳;若终端设备未在日志数据中携带操作时间戳,为了尽力确保存储日志数据的准确性,还可以确定日志数据中是否携带上传时间戳来记录日志数据的上传时间,若携带上传时间戳,可以将该上传时间戳作为日志数据的操作时间戳。
可选的,在S13中的根据操作时间戳将日志数据保存在预设文件中可以包括多种方法,下面列举两种方式进行说明。
第一种方式,按照操作时间戳的时间先后顺序将日志数据保存在预设文件中。
例如,有三个日志数据:日志数据A、操作时间戳为2014年8月21日20点21分12秒;日志数据B、操作时间戳为2014年8月22日15点26分2秒;日志数据C、操作时间戳为2014年8月29日20点1分00秒;那么就可以按照日志数据A、B、C的操作时间戳先后顺序将日志数据A、B、C保存在设定文件中,若设定文件中这三个日志数据中的操作时间戳之间还有其它日志数据,可以将日志数据A、B、C插在预设文件中其它日志数据之间。
相应地,在S14中从预设文件中获取校正时间窗口内的日志数据的步骤包括:
从预设文件中获取操作时间戳落在校正时间窗口内的日志数据。
例如,校正时间窗口是从2014年8月21日00点00分00秒至2014年8月23日24点59分59秒,那么就可以获取设定文件中操作时间戳落在这个时间段内的日志数据。
第二种方式,确定操作时间戳对应的计算周期;在日志数据中添加确定出的计算周期的标识;将添加计算周期的标识的日志数据保存在预设文件中。
例如,有三个日志数据:日志数据A、操作时间戳为2014年8月21日20点21分12秒,对应的计算周期是a、b、c,就可以在日志数据A中添加标识a、b、c;日志数据B、操作时间戳为2014年8月22日15点26分2秒,对应的计算周期是b、c、d,就可以在日志数据B中添加标识b、c、d;日志数据C、操作时间戳为2014年8月23日20点1分00秒,对应的计算周期是c、d、e,就可以在日志数据C中添加标识c、d、e;然后将添加标识的日志数据A、B、C保存在设定文件中。
相应地,在S14中的从预设文件中获取校正时间窗口内的日志数据的步骤包括:
从预设文件中获取携带当前计算周期的标识的日志数据。
例如,校正时间窗口对应的计算周期为a,就可以从设定文件中获取携带a的日志数据A;校正时间窗口对应的计算周期为b,就可以从设定文件中获取携带b的日志数据A、B;校正时间窗口对应的计算周期为c,就可以从设定文件中获取携带c的日志数据A、B、C。可见,在计算周期a、b、c中,日志数据A共被获取了3次,也就是3次都参与了业务指标的统计,随着时间的推移,日志数据更新的越来越多,从而可以确保业务指标的统计结果越来越准确。
下面举例说明业务指标的统计方法,如图2所示为校正时间窗口、计算周期与当前时刻的时间序列,其中,计算周期为T,校正时间窗口为W(w=3T),若当前时刻为t4,此时校正时间窗口的左边界为t1,右边界为t4,校正时间窗口为t1-t4,此时需要计算t1-t4之间的日志数据,t4时刻的日志数据是第一次被计算。
若当前时刻为t5,校正时间窗口的右边界是t5,左边界是t2,校正时间窗口为t2-t5,此时需要计算t2-t5之间的日志数据,t4时刻的日志数据是第二次被计算。
以此类推,当前时刻为t6时,t4时刻的日志数据是第三次被计算。
以此类推,当前时刻为t7时,t4时刻的日志数据是第四次被计算,由于t4时刻的日志数据不断在更新,相对于之前三次的计算结果更准确。
当前时刻为t7时,t4时刻不在校正时间窗口内,t4时刻的日志数据不会再被计算。
一般意义上任意一个时刻的日志数据会被更新w/t+1次,只要w和t都是合理的选择,业务指标的统计频率都是合适的,若是由集群进行业务指标统计,就可以有效使用集群资源,又因为日志数据一直处于更新状态,就可以保证统计结果越来越准确。
图3是根据一示例性实施例示出的一种业务指标的统计装置框图。参照图3,该装置包括接收模块31、第一获取模块32、保存模块33、第二获取模块34和计算模块35。
该接收模块31被配置为,实时接收终端设备上传的日志数据。
该第一获取模块32被配置为,获取日志数据的操作时间戳,操作时间戳用于表征日志数据所对应操作行为的发生时间。
该保存模块33被配置为,根据操作时间戳将日志数据保存在预设文件中。
该第二获取模块34被配置为,每个计算周期到期时,从预设文件中获取校正时间窗口内的日志数据,校正时间窗口的时间长度是计算周期的时间长度的设定倍数,校正时间窗口的结束时刻是当前计算周期到期的时刻。
该计算模块35被配置为,根据获取的日志数据以及获取的日志数据的操作时间戳对业务指标进行统计。
该方案中,由于是根据日志数据的操作时间戳保存日志数据,而操作时间戳用于表征日志数据所对应操作行为的发生时间,从而可以确保计算周期内的日志数据的准确性;并且,由于每个计算周期内会获取校正时间窗内的日志数据,并根据获取的日志数据及其对应的操作时间戳对业务指标进行统计,而校正时间窗口的时间长度是计算周期的时间长度的设定倍数,这就使得每个计算周期到期时,校正时间窗口内都会有一部分日志数据是被重复计算的,随着日志数据的实时更新,收集的日志数据越来越多,相应地根据校正时间窗口内的日志数据针对业务指标的统计结果也越来越准确,从而可以进一步确保ISP进行项目决策和调整,能够及时满足用户的需求,提升用户体验。
可选的,第一获取模块32包括第一确定子模块和解析子模块。
该第一确定子模块被配置为,确定日志数据是否携带操作时间戳。
该解析子模块被配置为,若日志数据携带操作时间戳,则解析日志数据,得到日志数据的操作时间戳;若日志数据未携带操作时间戳,则确定日志数据是否携带上传时间戳;若日志数据携带上传时间戳,则解析日志数据,得到上传时间戳,将上传时间戳确定作为日志数据的操作时间戳。
可选的,保存模块33包括第一保存子模块。
该第一保存子模块被配置为,按照操作时间戳的时间先后顺序将日志数据保存在预设文件中。
可选的,第二获取模块34包括第一获取子模块。
该第一获取子模块被配置为,从预设文件中获取操作时间戳落在校正时间窗口内的日志数据。
可选的,保存模块33包括第二确定子模块、添加子模块和第二保存子模块。
该第二确定子模块被配置为,确定操作时间戳对应的计算周期。
该添加子模块被配置为,在日志数据中添加确定出的计算周期的标识。
该第二保存子模块被配置为,将添加计算周期的标识的日志数据保存在预设文件中。
可选的,第二获取模块34包括第二获取子模块。
该第二获取子模块被配置为,从预设文件中获取携带当前计算周期的标识的日志数据。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图4是根据一示例性实施例示出的一种用于业务指标的统计装置1900的框图。例如,装置1900可以被提供为一服务器。参照图4,装置1900包括处理组件1922,其进一步包括一个或多个处理器,以及由存储器1932所代表的存储器资源,用于存储可由处理组件1922的执行的指令,例如应用程序。存储器1932中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件1922被配置为执行指令,以执行上述业务指标的统计方法,所述方法包括:
实时接收终端设备上传的日志数据;
获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;
根据所述操作时间戳将所述日志数据保存在预设文件中;
每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;
根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。
装置1900还可以包括一个电源组件1926被配置为执行装置1900的电源管理,一个有线或无线网络接口1950被配置为将装置1900连接到网络,和一个输入输出(I/O)接口1958。装置1900可以操作基于存储在存储器1932的操作系统,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。
Claims (13)
1.一种业务指标的统计方法,其特征在于,包括:
实时接收终端设备上传的日志数据;
获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;
根据所述操作时间戳将所述日志数据保存在预设文件中;
每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;
根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。
2.根据权利要求1所述的方法,其特征在于,所述获取所述日志数据的操作时间戳的步骤包括:
确定所述日志数据是否携带操作时间戳;
若所述日志数据携带操作时间戳,则解析所述日志数据,得到所述日志数据的操作时间戳;
若所述日志数据未携带操作时间戳,则确定所述日志数据是否携带上传时间戳;
若所述日志数据携带上传时间戳,则解析所述日志数据,得到所述上传时间戳,将所述上传时间戳确定作为所述日志数据的操作时间戳。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述操作时间戳将所述日志数据保存在预设文件中的步骤包括:
按照所述操作时间戳的时间先后顺序将所述日志数据保存在所述预设文件中。
4.根据权利要求3所述的方法,其特征在于,所述从所述预设文件中获取校正时间窗口内的日志数据的步骤包括:
从所述预设文件中获取操作时间戳落在所述校正时间窗口内的日志数据。
5.根据权利要求1或2所述的方法,其特征在于,所述根据所述操作时间戳将所述日志数据保存在预设文件中的步骤包括:
确定所述操作时间戳对应的计算周期;
在所述日志数据中添加确定出的计算周期的标识;
将添加计算周期的标识的所述日志数据保存在所述预设文件中。
6.根据权利要求5所述的方法,其特征在于,所述从所述预设文件中获取校正时间窗口内的日志数据的步骤包括:
从所述预设文件中获取携带当前计算周期的标识的日志数据。
7.一种业务指标的统计装置,其特征在于,包括:
接收模块,用于实时接收终端设备上传的日志数据;
第一获取模块,用于获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;
保存模块,用于根据所述操作时间戳将所述日志数据保存在预设文件中;
第二获取模块,用于每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;
计算模块,用于根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。
8.根据权利要求7所述的装置,其特征在于,所述第一获取模块包括:
第一确定子模块,用于确定所述日志数据是否携带操作时间戳;
解析子模块,用于若所述日志数据携带操作时间戳,则解析所述日志数据,得到所述日志数据的操作时间戳;若所述日志数据未携带操作时间戳,则确定所述日志数据是否携带上传时间戳;若所述日志数据携带上传时间戳,则解析所述日志数据,得到所述上传时间戳,将所述上传时间戳确定作为所述日志数据的操作时间戳。
9.根据权利要求7或8所述的装置,其特征在于,所述保存模块包括:
第一保存子模块,用于按照所述操作时间戳的时间先后顺序将所述日志数据保存在所述预设文件中。
10.根据权利要求9所述的装置,其特征在于,所述第二获取模块包括:
第一获取子模块,用于从所述预设文件中获取操作时间戳落在所述校正时间窗口内的日志数据。
11.根据权利要求7或8所述的装置,其特征在于,所述保存模块包括:
第二确定子模块,用于确定所述操作时间戳对应的计算周期;
添加子模块,用于在所述日志数据中添加确定出的计算周期的标识;
第二保存子模块,用于将添加计算周期的标识的所述日志数据保存在所述预设文件中。
12.根据权利要求11所述的装置,其特征在于,所述第二获取模块包括:
第二获取子模块,用于从所述预设文件中获取携带当前计算周期的标识的日志数据。
13.一种服务器,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
实时接收终端设备上传的日志数据;
获取所述日志数据的操作时间戳,所述操作时间戳用于表征所述日志数据所对应操作行为的发生时间;
根据所述操作时间戳将所述日志数据保存在预设文件中;
每个计算周期到期时,从所述预设文件中获取校正时间窗口内的日志数据,所述校正时间窗口的时间长度是所述计算周期的时间长度的设定倍数,所述校正时间窗口的结束时刻是当前计算周期到期的时刻;
根据获取的日志数据以及所述获取的日志数据的操作时间戳对业务指标进行统计。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410497412.0A CN104317811A (zh) | 2014-09-25 | 2014-09-25 | 业务指标的统计方法、装置及服务器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410497412.0A CN104317811A (zh) | 2014-09-25 | 2014-09-25 | 业务指标的统计方法、装置及服务器 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104317811A true CN104317811A (zh) | 2015-01-28 |
Family
ID=52373043
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410497412.0A Pending CN104317811A (zh) | 2014-09-25 | 2014-09-25 | 业务指标的统计方法、装置及服务器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104317811A (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104765835A (zh) * | 2015-04-14 | 2015-07-08 | 无锡天脉聚源传媒科技有限公司 | 一种搜索词的搜索方法及装置 |
CN107315655A (zh) * | 2017-06-02 | 2017-11-03 | 北京潘达互娱科技有限公司 | 一种实时统计的排行榜数据恢复方法与装置 |
CN107688619A (zh) * | 2017-08-10 | 2018-02-13 | 北京奇安信科技有限公司 | 一种日志数据处理方法及装置 |
CN108205587A (zh) * | 2017-12-28 | 2018-06-26 | 北京九章云极科技有限公司 | 一种日志监测方法及系统 |
CN109408347A (zh) * | 2018-09-28 | 2019-03-01 | 北京九章云极科技有限公司 | 一种指标实时分析系统及指标实时计算方法 |
CN110569222A (zh) * | 2019-08-23 | 2019-12-13 | 浙江大搜车软件技术有限公司 | 链路追踪方法、装置、计算机设备和可读存储介质 |
CN111177201A (zh) * | 2019-08-05 | 2020-05-19 | 腾讯科技(深圳)有限公司 | 一种数据流处理的方法以及相关装置 |
CN111752801A (zh) * | 2020-06-28 | 2020-10-09 | 中国银行股份有限公司 | 一种服务器监控方法及装置 |
CN113032413A (zh) * | 2021-03-10 | 2021-06-25 | 北京嘀嘀无限科技发展有限公司 | 数据采样方法、装置、电子设备、存储介质和程序产品 |
CN115150294A (zh) * | 2022-06-20 | 2022-10-04 | 浪潮工业互联网股份有限公司 | 一种用于监控物联网设备的数据分析方法、设备及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102737063A (zh) * | 2011-04-15 | 2012-10-17 | 阿里巴巴集团控股有限公司 | 一种日志信息的处理方法及系统 |
US8379816B1 (en) * | 2008-05-15 | 2013-02-19 | Trend Micro Incorporated | Methods and arrangement for handling phishing calls for telecommunication-enabled devices |
CN103324696A (zh) * | 2013-06-06 | 2013-09-25 | 合一信息技术(北京)有限公司 | 一种数据日志收集与统计分析系统和方法 |
CN103546514A (zh) * | 2012-07-13 | 2014-01-29 | 阿里巴巴集团控股有限公司 | 一种处理延迟发送的日志数据的方法和系统 |
-
2014
- 2014-09-25 CN CN201410497412.0A patent/CN104317811A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8379816B1 (en) * | 2008-05-15 | 2013-02-19 | Trend Micro Incorporated | Methods and arrangement for handling phishing calls for telecommunication-enabled devices |
CN102737063A (zh) * | 2011-04-15 | 2012-10-17 | 阿里巴巴集团控股有限公司 | 一种日志信息的处理方法及系统 |
CN103546514A (zh) * | 2012-07-13 | 2014-01-29 | 阿里巴巴集团控股有限公司 | 一种处理延迟发送的日志数据的方法和系统 |
CN103324696A (zh) * | 2013-06-06 | 2013-09-25 | 合一信息技术(北京)有限公司 | 一种数据日志收集与统计分析系统和方法 |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104765835A (zh) * | 2015-04-14 | 2015-07-08 | 无锡天脉聚源传媒科技有限公司 | 一种搜索词的搜索方法及装置 |
CN107315655B (zh) * | 2017-06-02 | 2020-05-19 | 北京潘达互娱科技有限公司 | 一种实时统计的排行榜数据恢复方法与装置 |
CN107315655A (zh) * | 2017-06-02 | 2017-11-03 | 北京潘达互娱科技有限公司 | 一种实时统计的排行榜数据恢复方法与装置 |
CN107688619A (zh) * | 2017-08-10 | 2018-02-13 | 北京奇安信科技有限公司 | 一种日志数据处理方法及装置 |
CN107688619B (zh) * | 2017-08-10 | 2020-06-16 | 奇安信科技集团股份有限公司 | 一种日志数据处理方法及装置 |
CN108205587A (zh) * | 2017-12-28 | 2018-06-26 | 北京九章云极科技有限公司 | 一种日志监测方法及系统 |
CN109408347A (zh) * | 2018-09-28 | 2019-03-01 | 北京九章云极科技有限公司 | 一种指标实时分析系统及指标实时计算方法 |
CN111177201A (zh) * | 2019-08-05 | 2020-05-19 | 腾讯科技(深圳)有限公司 | 一种数据流处理的方法以及相关装置 |
CN111177201B (zh) * | 2019-08-05 | 2023-10-13 | 腾讯科技(深圳)有限公司 | 一种数据流处理的方法以及相关装置 |
CN110569222A (zh) * | 2019-08-23 | 2019-12-13 | 浙江大搜车软件技术有限公司 | 链路追踪方法、装置、计算机设备和可读存储介质 |
CN110569222B (zh) * | 2019-08-23 | 2022-11-15 | 浙江大搜车软件技术有限公司 | 链路追踪方法、装置、计算机设备和可读存储介质 |
CN111752801A (zh) * | 2020-06-28 | 2020-10-09 | 中国银行股份有限公司 | 一种服务器监控方法及装置 |
CN113032413A (zh) * | 2021-03-10 | 2021-06-25 | 北京嘀嘀无限科技发展有限公司 | 数据采样方法、装置、电子设备、存储介质和程序产品 |
CN115150294A (zh) * | 2022-06-20 | 2022-10-04 | 浪潮工业互联网股份有限公司 | 一种用于监控物联网设备的数据分析方法、设备及介质 |
CN115150294B (zh) * | 2022-06-20 | 2023-10-13 | 浪潮工业互联网股份有限公司 | 一种用于监控物联网设备的数据分析方法、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104317811A (zh) | 业务指标的统计方法、装置及服务器 | |
CN107515826B (zh) | 测试用例精准推荐方法、装置、系统、设备及存储介质 | |
US9544403B2 (en) | Estimating latency of an application | |
US10372703B2 (en) | Systems and methods for automated identification of applications for deletion recommendation on a user device | |
US9774654B2 (en) | Service call graphs for website performance | |
US20130262653A1 (en) | Construction Of Social Structures | |
CN105898209A (zh) | 视频平台监控分析系统 | |
US20160225042A1 (en) | Determining a cost of an application programming interface | |
US20180285371A1 (en) | Method and apparatus for automatically discovering gas station poi, storage medium and device | |
CN109858683B (zh) | 确定店铺的营业状态的方法、装置、电子设备及存储介质 | |
CN111294730B (zh) | 一种网络问题投诉信息处理的方法及装置 | |
US10411969B2 (en) | Backend resource costs for online service offerings | |
CN105579956A (zh) | 移动应用性能预测 | |
CN104537000A (zh) | 一种用于推送信息的方法和装置 | |
US11521237B2 (en) | Method and system for determining fact of visit of user to point of interest | |
JP2014038604A (ja) | 通信行動の統計分析システム | |
US20190050317A1 (en) | Systems and methods for determining event processing delays | |
US9357020B2 (en) | Information source selection system, information source selection method, and program | |
CN105516392A (zh) | Ip地址信息库更新方法及装置 | |
CN104579830A (zh) | 服务监控方法及装置 | |
US20160225043A1 (en) | Determining a cost of an application | |
JP2015201060A (ja) | センサデータ収集システム | |
CN109087107B (zh) | 基于分布式内存数据库的实时监控方法、系统及电子设备 | |
US20230023392A1 (en) | Methods and apparatus to estimate the second frequency moment for computer-monitored media accesses | |
CN112835779A (zh) | 测试用例确定方法、装置、计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150128 |
|
RJ01 | Rejection of invention patent application after publication |