CN106788896A - 日志数据的上传方法和装置 - Google Patents

Abstract

本发明提供一种日志数据的上传方法和装置，该方法包括：根据预设周期获取日志数据；根据网络状态确定每次上传的日志数据的数量；根据所述数量，将所述日志数据进行分次上传。本发明提供的日志数据的上传方法和装置，在日志数据生成的过程中，通过根据预设周期获取日志数据，使得各日志数据的容量较少，避免了传输失败；同时，在进行日志数据上传时，结合当前网络状态，确定日志数据的上传数量，以避免传输失败，降低用户流量消耗，提高用户使用流畅度。

Description

日志数据的上传方法和装置

技术领域

本发明涉及数据处理技术，尤其涉及一种日志数据的上传方法和装置。

背景技术

随着移动互联网的日益发展壮大，便携式电子设备可随时随地接入网络中，可安装在终端设备上的应用软件层出不穷，丰富了终端设备的功能。用户在使用应用软件中产生大量的日志数据，应用软件供应商可根据日志数据进行用户分析、性能监测、错误修正等。因此，合理的用户行为、日志收集、上报系统极为重要。

现有技术中的日志数据的上传方法，通常在终端设备连接有网络的情况下，在主线程一次性上传日志。日志的上传采用一次性上传，当用户产生了大量日志时，上传比较消耗用户的流量，并且若终端设备的网络状态不稳定时，容易造成上传失败，需多次上传浪费用户流量，影响用户使用流畅度。

发明内容

本发明提供一种日志数据的上传方法和装置，用以解决现有的日志数据的上传方法比较消耗用户流量的问题。

本发明一方面提供一种日志数据的上传方法，包括：

根据预设周期获取日志数据；

根据网络状态确定每次上传的日志数据的数量；

根据所述数量，将所述日志数据进行分次上传。

如上所述的日志数据的上传方法，所述根据预设的周期获取日志数据，包括：

根据所述预设周期采用预先创建的日志线程获取终端设备的日志内容；

将所述日志内容进行压缩处理得到所述日志数据。

如上所述的日志数据的上传方法，所述根据预设周期获取日志数据之前，所述方法还包括：

创建所述日志线程；所述日志线程用于对所述日志数据进行读、写或者压缩操作。

如上所述的日志数据的上传方法，所述网络状态包括以下至少一个特征参数：网络类型、带宽、时延。

如上所述的日志数据的上传方法，当所述网络状态包括网络类型，且所述日志数据均为文本文件，则所述根据网络状态确定每次上传的日志数据的数量，包括：

若所述网络类型为无线网络，则每次上传的日志数据的数量为第一数量；

若所述网络类型为4G或者5G网络，则每次上传的日志数据的数量为第二数量；

若所述网络类型为3G或2G网络，则每次上传的日志数据的数量为第三数量；

其中，所述第一数量大于所述第二数量，所述第二数量大于所述第三数量。

如上所述的日志数据的上传方法，所述根据预设周期获取日志数据之前，还包括：

接收服务器发送的日志参数文件，根据所述日志参数文件设置日志参数；或者，检测到用户操作的HTML5页面，确定所述HTML5页面的业务类型，根据所述业务类型设置日志参数；

所述根据预设周期获取日志数据，包括：

根据所述预设周期和所述日志参数获取日志数据。

下面介绍本发明实施例提供的一种日志数据的上传装置，该装置与方法一一对应，用以实现上述实施例中的日志数据的上传方法，具有相同的技术特征和技术效果，本发明对此不再赘述。

本发明另一方面提供一种日志数据的上传装置，包括：

日志数据获取模块，用于根据预设周期获取日志数据；

上传数量确定模块，用于根据网络状态确定每次上传的日志数据的数量；

上传模块，用于根据所述数量，将所述日志数据进行分次上传。

如上所述的日志数据的上传装置，所述日志数据获取模块包括：

日志内容获取单元，用于根据所述预设周期采用预先创建的日志线程获取终端设备的日志内容；

压缩单元，用于将所述日志内容进行压缩处理得到所述日志数据。

如上所述的日志数据的上传装置，所述装置还包括：

线程创建模块，用于创建所述日志线程；所述日志线程用于对所述日志数据进行读、写或者压缩操作。

如上所述的日志数据的上传装置，所述网络状态包括以下至少一个特征参数：网络类型、带宽、时延。

如上所述的日志数据的上传装置，当所述网络状态包括网络类型，且所述日志数据均为文本文件，则所述上传数量确定模块具体用于：

若所述网络类型为无线网络，则每次上传的日志数据的数量为第一数量；

若所述网络类型为4G或者5G网络，则每次上传的日志数据的数量为第二数量；

若所述网络类型为3G或2G网络，则每次上传的日志数据的数量为第三数量；

其中，所述第一数量大于所述第二数量，所述第二数量大于所述第三数量。

如上所述的日志数据的上传装置，还包括：

日志参数获取模块，用于接收服务器发送的日志参数文件，根据所述日志参数文件设置日志参数；或者，检测到用户操作的HTML5页面，确定所述HTML5页面的业务类型，根据所述业务类型设置日志参数；

所述日志数据获取模块具体用于，根据所述预设周期和所述日志参数获取日志数据。

本发明提供的日志数据的上传方法和装置，包括：根据预设周期获取日志数据，根据网络状态确定每次上传的日志数据的数量，根据数量，将日志数据进行分次上传。在日志数据生成的过程中，通过根据预设周期获取日志数据，使得各日志数据的容量较少，避免了传输失败；同时，在进行日志数据上传时，结合当前网络状态，确定日志数据的上传数量，以避免传输失败，降低用户流量消耗，提高用户使用流畅度。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明提供的日志数据的上传方法实施例一的流程示意图；

图2为本发明提供的日志数据的上传方法实施例二的流程示意图；

图3为本发明提供的日志数据的上传方法实施例三的流程示意图；

图4为本发明提供的日志数据的上传装置实施例一的结构示意图；

图5为本发明提供的日志数据的上传装置实施例二的结构示意图；

图6为本发明提供的日志数据的上传装置实施例三的结构示意图；

图7为本发明提供的日志数据的上传装置实施例四的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1为本发明提供的日志数据的上传方法实施例一的流程示意图，该方法的执行主体为日志数据的上传装置，该装置可以通过软件或硬件的方式实现，示例性的，该日志数据的上传方法的执行主体集成在应用软件中。如图1所示，该方法包括：

S101、根据预设周期获取日志数据；

S102、根据网络状态确定每次上传的日志数据的数量；

S103、根据数量，将日志数据进行分次上传。具体的，在S101中，日志数据的上传装置根据预设周期获取日志数据。示例性的，预设的埋点生成一条条记录，记录在一个日志中，随着时间增长，日志中内容越来越多，将会导致日志的大小越大，较大的日志传输时容易存在传输错误的问题，且当网络故障时，还需重新传输，浪费用户的流量。因此，在S101中，根据预设周期，获取日志数据，即将一个周期内的记录生成为一个日志数据，从而获取得到多个内容较少的日志数据，方便了后续的日志数据的上传。可选的，还可根据预设的日志数据容量大小来获取日志数据，使得生成的每个日志数据都具有相同的大小。

具体的，在S102中，获取当前终端设备的网络状态，根据网络状态确定每次上传的日志数据的数量。当终端设备的网络状态不同时，日志数据的传输速度和传输成本不同，当传输速度较慢时，可能影响用户使用终端设备的流畅度，因此，结合终端设备的网络状态，确定每次上传的日志数据的数量，例如，当当前网络为无线网络时，日志数据的上传成本较低，数量可以较大，当当前网络为受限网络时，可将数量设置较小。可选的，还可根据终端设备当前的网络使用状况确定每次上传的日志数据的数量，当终端设备频繁使用网络，正在使用网络传输其他文件、数据时，则可将数量设置较小。可选的额，还可根据终端设备当前的资源利用情况确定每次上传的日志数据的数量。

具体的，在S103中，根据S102中确定的数量，将日志数据进行分次上传，示例性的，每次上传该数量的日志数据。

本发明提供的日志数据的上传方法，包括：根据预设周期获取日志数据，根据网络状态确定每次上传的日志数据的数量，根据数量，将日志数据进行分次上传。在日志数据生成的过程中，通过根据预设周期获取日志数据，使得各日志数据的容量较少，避免了传输失败；同时，在进行日志数据上传时，结合当前网络状态，确定日志数据的上传数量，以避免传输失败，降低用户流量消耗，提高用户使用流畅度。

进一步的，在图1所示实施例的基础上，对S101中的根据预设周期获取日志数据进行详细说明。图2为本发明提供的日志数据的上传方法实施例二的流程示意图，如图2所示，根据预设周期获取日志数据，具体包括：

S201、根据预设周期采用预先创建的日志线程获取终端设备的日志内容；

S202、将日志内容进行压缩处理得到日志数据。

具体的，在S201中，日志数据的上传装置根据预设周期采用预先创建的日志线程获取终端设备的日志内容，考虑到现有技术中采用主线程获取终端设备的日志数据，可能影响主线程上的其他功能的实现，导致用户使用时流畅度降低，因此，采用预先创建的日志线程来根据预设周期获取日志内容，在一个周期结束生成日志内容后，执行S202，将日志内容进行压缩处理得到日志数据，压缩后的日志数据体积较小，节约了用户的流量。

进一步的，在图2所示实施例的基础上，图3为本发明提供的日志数据的上传方法实施例二的流程示意图，如图3所示，该方法包括：

S301、创建日志线程，日志线程用于对日志数据进行读、写或者压缩操作；

S302、根据预设周期采用预先创建的日志线程获取终端设备的日志内容；

S303、将日志内容进行压缩处理得到日志数据；

S304、根据网络状态确定每次上传的日志数据的数量；

S305、根据数量，将日志数据进行分次上传。

示例性的，S302和S303与图2所示实施例中的S201和S202相同，S304和S305与图1所示实施例中的S102和S103相同，本发明对此不再赘述。

具体的，在根据预设周期采用预先创建的日志线程获取终端设备的日志内容之前，首先创建日志线程，示例性的，可以为用户使用终端设备，打开应用软件时，创建专用的日志线程。日志线程用于对日志数据进行读、写或者压缩等操作。可选的，在上述实施例的基础上，网络状态包括以下至少一个特征参数：网络类型、带宽、时延。

示例性的，可以根据特征参数确定当前网络情况。示例性的，网络类型包括无线网络、5G、4G、3G、2G等，带宽包括10M、8M等。

示例性的，当网络状态包括网络类型，且日志数据均为文本文件时，则根据网络状态确定每次上传的日志数据的数量，具体包括：

若网络类型为无线网络，则每次上传的日志数据的数量为第一数量；

若网络类型为4G或者5G网络，则每次上传的日志数据的数量为第二数量；

若网络类型为3G或2G网络，则每次上传的日志数据的数量为第三数量；

其中，第一数量大于第二数量，第二数量大于第三数量。

具体的，

可选的，在上述任一实施例的基础上，根据预设周期获取日志数据之前，还包括：

接收服务器发送的日志参数文件，根据日志参数文件设置日志参数；或者，检测到用户操作的超文本标记语言第五版(HyperText Markup Language 5，简称HTML5)页面，确定HTML5页面的业务类型，根据业务类型设置日志参数；

根据预设周期获取日志数据，包括：

根据预设周期和日志参数获取日志数据。

考虑到现有技术中的日志数据中的数据均为固定参数对应的数据，灵活性较差，无法根据用户访问业务的不同，采集有效的数据以便服务器进行用户行为分析，本实施例提供以下可能的日志数据中日志参数的修改方法：

一种可能的实现方式：

接收服务器发送的日志参数文件，根据日志参数文件设置日志参数；

具体的，当应用软件接收到服务器发送的日志参数文件时，根据日志参数文件中指示的日志数据的参数，设置日志参数。

另一种可能的实现方式：

检测到用户操作的HTML5页面，确定HTML5页面的业务类型，根据业务类型设置日志参数；

具体的，当用户在使用应用软件过程中，应用软件中的不同的业务对应不同的日志参数，故可提前配置业务的HTML5页面对应的日志参数。当检测到用户选定一个HTML5页面时，则可确定该HTML5页面的业务类型，再根据业务类型设置日志数据的日志参数。

通过提供上述方式修改日志参数，根据修改后的日志参数生成日志数据，使得日志数据可以个性化配置，提高了日志数据的价值。

本发明另一方面还提供的一种日志数据的上传装置，该装置可以由软件/硬件实现，示例性的，可以为便携式终端设备。该装置与方法实施例一一对应，用以实现上述实施例中的日志数据的上传方法，具有相同的技术特征和技术效果，本发明实施例对此不再赘述。

图4为本发明提供的日志数据的上传装置实施例一的结构示意图；如图4所示，该装置包括：

日志数据获取模块401，用于根据预设周期获取日志数据；

上传数量确定模块402，用于根据网络状态确定每次上传的日志数据的数量；

上传模块403，用于根据数量，将日志数据进行分次上传。

在图4所示实施例的基础上，图5为本发明提供的日志数据的上传装置实施例二的结构示意图；如图5所示，日志数据获取模块401包括：

日志内容获取单元501，用于根据预设周期采用预先创建的日志线程获取终端设备的日志内容；

压缩单元502，用于将日志内容进行压缩处理得到日志数据。

在图5所示实施例的基础上，图6为本发明提供的日志数据的上传装置实施例三的结构示意图。如图6所示，该装置包括：

线程创建模块601，用于创建日志线程，日志线程用于对日志数据进行读、写或者压缩操作；

日志内容获取单元602，用于根据预设周期采用预先创建的日志线程获取终端设备的日志内容；

压缩单元603，用于将日志内容进行压缩处理得到日志数据；

上传数量确定模块604，用于根据网络状态确定每次上传的日志数据的数量；

上传模块605，用于根据数量，将日志数据进行分次上传。

可选的，网络状态包括以下至少一个特征参数：网络类型、带宽、时延；

示例性的，参考图6，当网络状态包括网络类型，且日志数据均为文本文件，则上传数量确定模块604具体用于：

若网络类型为无线网络，则每次上传的日志数据的数量为第一数量；

若网络类型为4G或者5G网络，则每次上传的日志数据的数量为第二数量；

若网络类型为3G或2G网络，则每次上传的日志数据的数量为第三数量；

其中，第一数量大于第二数量，第二数量大于第三数量。

在上述任一实施例的基础上，图7为本发明提供的日志数据的上传装置实施例四的结构示意图。如图7所示，该装置包括：

日志参数获取模块701，用于接收服务器发送的日志参数文件，根据日志参数文件设置日志参数；或者，检测到用户操作的HTML5页面，确定HTML5页面的业务类型，根据业务类型设置日志参数；

日志数据获取模块702，用于根据预设周期和日志参数获取日志数据；

上传数量确定模块703，用于根据网络状态确定每次上传的日志数据的数量；

上传模块704，用于根据数量，将日志数据进行分次上传。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。另外，本发明所提供的几个实施例可以整体或部分的相互结合形成新的实施例，而这些新的实施例，仍属于本发明范围内。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种日志数据的上传方法，其特征在于，包括：

根据预设周期获取日志数据；

根据网络状态确定每次上传的日志数据的数量；

根据所述数量，将所述日志数据进行分次上传。

2.根据权利要求1所述的方法，其特征在于，所述根据预设的周期获取日志数据，包括：

根据所述预设周期采用预先创建的日志线程获取终端设备的日志内容；

将所述日志内容进行压缩处理得到所述日志数据。

3.根据权利要求2所述的方法，其特征在于，所述根据预设周期获取日志数据之前，所述方法还包括：

创建所述日志线程；所述日志线程用于对所述日志数据进行读、写或者压缩操作。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述网络状态包括以下至少一个特征参数：网络类型、带宽、时延。

5.根据权利要求4所述的方法，其特征在于，当所述网络状态包括网络类型，且所述日志数据均为文本文件，则所述根据网络状态确定每次上传的日志数据的数量，包括：

若所述网络类型为无线网络，则每次上传的日志数据的数量为第一数量；

若所述网络类型为4G或者5G网络，则每次上传的日志数据的数量为第二数量；

若所述网络类型为3G或2G网络，则每次上传的日志数据的数量为第三数量；

其中，所述第一数量大于所述第二数量，所述第二数量大于所述第三数量。

6.根据权利要求1至3任一项所述的方法，其特征在于，所述根据预设周期获取日志数据之前，还包括：

接收服务器发送的日志参数文件，根据所述日志参数文件设置日志参数；或者，检测到用户操作的HTML5页面，确定所述HTML5页面的业务类型，根据所述业务类型设置日志参数；

所述根据预设周期获取日志数据，包括：

根据所述预设周期和所述日志参数获取日志数据。

7.一种日志数据的上传装置，其特征在于，包括：

日志数据获取模块，用于根据预设周期获取日志数据；

上传数量确定模块，用于根据网络状态确定每次上传的日志数据的数量；

上传模块，用于根据所述数量，将所述日志数据进行分次上传。

8.根据权利要求7所述的装置，其特征在于，所述日志数据获取模块包括：

日志内容获取单元，用于根据所述预设周期采用预先创建的日志线程获取终端设备的日志内容；

压缩单元，用于将所述日志内容进行压缩处理得到所述日志数据。

9.根据权利要求8所述的装置，其特征在于，所述装置还包括：

线程创建模块，用于创建所述日志线程；所述日志线程用于对所述日志数据进行读、写或者压缩操作。

10.根据权利要求7至9任一项所述的装置，其特征在于，所述网络状态包括以下至少一个特征参数：网络类型、带宽、时延；

当所述网络状态包括网络类型，且所述日志数据均为文本文件，则所述上传数量确定模块具体用于：

若所述网络类型为无线网络，则每次上传的日志数据的数量为第一数量；

若所述网络类型为4G或者5G网络，则每次上传的日志数据的数量为第二数量；

若所述网络类型为3G或2G网络，则每次上传的日志数据的数量为第三数量；

其中，所述第一数量大于所述第二数量，所述第二数量大于所述第三数量。