CN109618331A - 数据上报方法、装置、设备及存储介质 - Google Patents

数据上报方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN109618331A
CN109618331A CN201910105238.3A CN201910105238A CN109618331A CN 109618331 A CN109618331 A CN 109618331A CN 201910105238 A CN201910105238 A CN 201910105238A CN 109618331 A CN109618331 A CN 109618331A
Authority
CN
China
Prior art keywords
data
cached
type
report
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910105238.3A
Other languages
English (en)
Inventor
李伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Lexin Software Technology Co Ltd
Original Assignee
Shenzhen Lexin Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Lexin Software Technology Co Ltd filed Critical Shenzhen Lexin Software Technology Co Ltd
Priority to CN201910105238.3A priority Critical patent/CN109618331A/zh
Publication of CN109618331A publication Critical patent/CN109618331A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/22—Processing or transfer of terminal data, e.g. status or physical capabilities
    • H04W8/24—Transfer of terminal data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/02—Protecting privacy or anonymity, e.g. protecting personally identifiable information [PII]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W52/00—Power management, e.g. TPC [Transmission Power Control], power saving or power classes
    • H04W52/02—Power saving arrangements
    • H04W52/0209—Power saving arrangements in terminal devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/22—Processing or transfer of terminal data, e.g. status or physical capabilities
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种数据上报方法、装置、设备及存储介质。所述方法包括：在检测到目标应用启动后有新数据产生时，将所述新数据缓存至缓存数据库中，并根据与所述新数据所属数据类型对应的数据配置参数判断所述数据类型是否满足数据上报条件；如果确定满足数据上报条件，则从所述缓存数据库中提取与所述数据类型对应的缓存数据；将所述缓存数据上报至服务器。通过本发明的技术方案，能够实现同一时间段内数据上报数量可控，降低设备耗电量，避免抢占内存资源，提高APP性能，提升用户体验。

Description

数据上报方法、装置、设备及存储介质
技术领域
本发明实施例涉及数据处理技术，尤其涉及一种数据上报方法、装置、设备及存储介质。
背景技术
在APP(Application，应用软件)的使用中，往往需要上报大量的数据到服务器以支撑业务的需要，这些数据包括但不限于：页面访问记录、用户点击事件、反欺诈数据、APP错误信息、网络性能监控等。
目前通用的数据上报方案是，只要APP获取到新数据就马上发送网络请求，将该新数据上报到服务器中对应的业务平台。由于数据的产生跟用户行为紧密相关，具有偶发性，故现有技术中在APP的运行的过程中会不定时的爆发大量的网络请求，尤其是在APP的启动环节，这一情况较为严重，会直接影响APP的启动速度，增大APP的耗电量，影响用户体验。
发明内容
本发明实施例提供一种数据上报方法、装置、设备及存储介质，以实现同一时间段内数据上报数量可控，降低设备耗电量，避免抢占内存资源，提高APP性能，提升用户体验。
第一方面，本发明实施例提供了一种数据上报方法，包括：
在检测到目标应用启动后有新数据产生时，将所述新数据缓存至缓存数据库中，并根据与所述新数据所属数据类型对应的数据配置参数判断所述数据类型是否满足数据上报条件；
如果确定满足数据上报条件，则从所述缓存数据库中提取与所述数据类型对应的缓存数据；
将所述缓存数据上报至服务器。
第二方面，本发明实施例还提供了一种数据上报装置，该装置包括：
上报条件判断模块，用于在检测到目标应用启动后有新数据产生时，将所述新数据缓存至缓存数据库中，并根据与所述新数据所属数据类型对应的数据配置参数判断所述数据类型是否满足数据上报条件；
缓存数据提取模块，用于如果确定满足数据上报条件，则从所述缓存数据库中提取与所述数据类型对应的缓存数据；
缓存数据上报模块，用于将所述缓存数据上报至服务器。
第三方面，本发明实施例还提供了一种计算机设备，该设备包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例中任一所述的数据上报方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的数据上报方法。
本发明实施例通过在检测到目标应用启动后有新数据产生时，将该新数据缓存至缓存数据库中，并根据与该新数据所属数据类型对应的数据配置参数判断此数据类型是否满足数据上报条件，在确定满足数据上报条件的情况下，从缓存数据库中提取与此数据类型对应的缓存数据，进而将所述缓存数据上报至服务器，利用对不同的数据类型采取不同的数据上报策略，解决了现有技术中因对所有数据类型的数据均采用实时上报的策略，而导致APP性能受到影响、设备耗电量增大、用户体验差的问题，实现了同一时间段内数据上报数量可控，降低设备耗电量，避免抢占内存资源，提高APP性能，提升用户体验的效果。
附图说明
图1a是本发明实施例一提供的一种数据上报方法的流程示意图；
图1b是现有技术中数据上报方法的流程示意图；
图2a是本发明实施例二提供的一种数据上报方法的流程示意图；
图2b是本发明实施例二适用的一种数据上报流程的示意图；
图3是本发明实施例三提供的一种数据上报装置的结构示意图；
图4是本发明实施例四提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1a为本发明实施例一提供的一种数据上报方法的流程示意图。该方法可适用于将客户端数据上报至服务器的情况，该方法可以由数据上报装置来执行，该装置可由硬件和/或软件组成，并一般可集成在客户端以及所有包含数据上报功能的终端中。具体包括如下：
S110、在检测到目标应用启动后有新数据产生时，将新数据缓存至缓存数据库中，并根据与新数据所属数据类型对应的数据配置参数判断数据类型是否满足数据上报条件。
本实施例中，目标应用可以是安装在计算机设备上的应用软件客户端，其中，计算机设备包括但不限于智能手机、智能平板、智能可穿戴设备、电脑等。当目标应用启动后，可实时监测该目标应用是否有获取到新数据。该新数据的数据来源，也即新数据所属的数据类型，包括但不限于页面访问记录、用户事件、反欺诈采集数据、APP错误信息、电商ECR(Efficient Consumer Response，有效客户反应)、原生网络请求数据、性能监控数据等。
现有技术中，一旦发现APP有新数据产生，均会针对不同的新数据制订不同的协议接口，并分别上报到该APP服务器中对应的业务后台，如图1b所示，现有技术中同一时刻产生的不同数据会分别进行包装后，通过各自的协议接口分别发送网络请求至各自的业务后台，这就可能会导致该段时间内，数据上报量呈现爆发式增长，抢占内存资源，提高设备耗电量，降低APP性能，进而影响用户体验。
为了解决上述问题，本实施例针对不同的数据类型配置不同的数据配置参数，从而在检测到目标应用有新数据产生时，根据该新数据所属数据类型对应的数据配置参数，采用不同的上传策略，来判断该数据类型是否满足数据上报条件。其中，针对不同数据类型的数据特性，可对应设置不同的数据配置参数，而不同的数据配置参数可对应于不同的数据上报条件。
在进行上传策略判断的同时，将新数据缓存至预设的缓存数据库中，为了便于数据的存储及查找，可对产生的每条新数据生成唯一的id，与该新数据对应存储。
可选的，数据配置参数包括：数据类型标识、最大缓存条数以及上报时间间隔。
其中，数据类型标识，可用于区分数据所属数据类型，以便将每个数据类型对应至服务器中不同的业务平台；最大缓存条数，用于当缓存的数据条数超过该条数时，将该类型的所有缓存的数据一起上报；上报时间间隔，用于确定同一类型数据多长时间间隔上报一次。
举一个实际例子，例如页面浏览记录数据量大，无实时性要求，其数据配置参数中，数据类型标识定为1，最大缓存条数定为20，上报时间间隔定为60秒；风控数据非常重要，需要实时上报，其数据配置参数中，数据类型标识定为3，最大缓存条数定为1，上报时间间隔定为0秒。
可选的，本实施例提供的数据上报方法还包括：在检测到目标应用启动时，从服务器获取最新数据配置文件；将最新数据配置文件对本地存储的数据配置文件进行更新；其中，数据配置文件中包含有各数据类型对应的数据配置参数。
示例性的，各数据类型对应的数据配置参数可包含于数据配置文件中，该数据配置文件可以是预先存储在客户端本地的，也可以是在目标应用启动时，从服务器获取最新配置文件对本地存储的数据配置文件进行更新存储的。
S120、如果确定满足数据上报条件，则从缓存数据库中提取与数据类型对应的缓存数据。
本实施例中，只有当获取的新数据所属的数据类型，满足该数据类型对应的数据上报条件时，才可进行数据上报。具体的，在进行数据上报时，可从缓存数据库中提取该类型下的所有缓存数据，以便对该类型的所有缓存数据打包后一起进行上报，从而节约网络和内存资源，提高APP性能，提升用户体验。
在一个可实施方式中，若获取的新数据所属的数据类型，不满足该数据类型对应的数据上报条件，则返回继续检测是否有新数据产生，直至满足该数据类型对应的数据上报条件。
可选的，确定满足数据上报条件，包括：确定缓存数据库中，与新数据所属数据类型对应的缓存数据的条数，达到数据类型的最大缓存条数；或，确定新数据所属数据类型的最近数据上报时间与当前系统时间之间的间隔，达到数据类型的上报时间间隔。
举一个实际例子，例如缓存数据库中当页面浏览记录达到该数据类型的最大缓存条数20条时，则将这20条数据从缓存数据库中取出，合并上报。又如，缓存数据库中，页面浏览记录虽然未达到该数据类型的最大缓存条数20条，但最近一次数据上报的时间距离当前系统时间的时间间隔，达到该数据类型的上报时间间隔60秒，也可将该段时间内缓存的所有数据从缓存数据库中取出，合并上报。
S130、将缓存数据上报至服务器。
本实施例中，目标应用客户端在启动后，需要向该应用的服务器上报相应的数据，以便服务器进行数据分析并提供相应的服务。因此，在从缓存数据库中提取出满足数据上报条件的数据类型下对应的所有缓存数据后，可将所有的缓存数据打包合并为一个网络请求，上报至对应的应用服务器。
可选的，本实施例提供的数据上报方法还包括：接收服务器发送的上报反馈信息；如果上报反馈信息为上报成功，则从缓存数据库中删除缓存数据；如果上报反馈信息为上报失败，则在目标应用下次启动时，重新将缓存数据上报至服务器。
在将数据上报至服务器之后，服务器会根据数据的接收情况以及存储情况生成相应的上报反馈信息，包括是否接收到数据，是否存储成功。若接收到数据且存储成功，则客户端接收到的上报反馈信息为上报成功；反之，若未接收到数据，或者数据已接收到但未存储成功，则客户端接收到的上报反馈信息为上报失败。在接收到的上报反馈信息为上报成功时，可根据缓存数据的id对应删除缓存数据库中缓存的数据，以避免重复上报；在接收到的上报反馈信息为上报失败时，可在目标应用下次启动时，重新上传该缓存数据，从而提高数据上传成功率，保障了数据的完整性。
本实施例的技术方案，通过在检测到目标应用启动后有新数据产生时，将该新数据缓存至缓存数据库中，并根据与该新数据所属数据类型对应的数据配置参数判断此数据类型是否满足数据上报条件，在确定满足数据上报条件的情况下，从缓存数据库中提取与此数据类型对应的缓存数据，进而将所述缓存数据上报至服务器，利用对不同的数据类型采取不同的数据上报策略，解决了现有技术中因对所有数据类型的数据均采用实时上报的策略，而导致APP性能受到影响、设备耗电量增大、用户体验差的问题，实现了同一时间段内数据上报数量可控，降低设备耗电量，避免抢占内存资源，提高APP性能，提升用户体验的效果。
实施例二
图2a为本发明实施例二提供的一种数据上报方法的流程示意图。本实施例以上述实施例为基础进行优化，提供了优选的数据上报方法，具体是，将缓存数据上报至服务器进一步优化为，包括：按照预设通用协议的格式对缓存数据进行组装，生成通用数据包，通用数据包中包含有缓存数据所属数据类型的数据类型标识；对通用数据包进行加密后上报至服务器的网关，以使网关按照预设通用协议对通用数据包进行解密和拆分，并根据数据类型标识将拆分后得到的数据分发至服务器中对应的业务平台。
本实施例提供的数据上报方法具体包括如下步骤：
S210、在检测到目标应用启动后有新数据产生时，将新数据缓存至缓存数据库中，并根据与新数据所属数据类型对应的数据配置参数判断数据类型是否满足数据上报条件。
S220、如果确定满足数据上报条件，则从缓存数据库中提取与数据类型对应的缓存数据。
S230、按照预设通用协议的格式对缓存数据进行组装，生成通用数据包，通用数据包中包含有缓存数据所属数据类型的数据类型标识。
本实施例中，预设通用协议的格式例如可以是定义的包含数据类型标识位和数据列表的格式，其中，数据类型标识位可用于填写与待组装的缓存数据所属数据类型对应的数据类型标识，数据列表可用于填写各缓存数据。通过使用预设通用协议的格式对缓存数据进行组装，使得该通用协议的格式可以被各种类型的数据所复用，与现有技术中需要对针对每个数据类型开发相应的数据协议接口相比，减少了开发量，提升了新增业务的开发速度。
不同数据类型的缓存数据均可按照预设通用协议的格式进行组装打包，生成通用数据包，由于该通用数据包中携带有该缓存数据所属数据类型的数据类型标识，因此，可使用同一网络链路上报至服务器，由服务器对各通用数据包按照数据类型标识进行区别和分发。
S240、对通用数据包进行加密后上报至服务器的网关，以使网关按照预设通用协议对通用数据包进行解密和拆分，并根据数据类型标识将拆分后得到的数据分发至服务器中对应的业务平台。
示例性的，缓存数据组装完成后，可采用网络通用密钥对生成的通用数据包进行数据整体加密，以提高网络传输安全，将加密后的通用数据包通过网络请求的方式发送给服务器的网关。
服务器网关在接收到该通用数据包后，可首先根据网络通用密钥对通用数据包进行整体数据外层解密，再依据预设通用协议进行数据拆分，并按照携带的数据类型标识将拆分后得到的各个数据分发至服务器中，与该数据类型标识相对应的业务平台。其中，服务器中可包含有多个业务平台，不同的业务平台可用于对不同数据类型的数据进行业务处理。
可选的，在按照预设通用协议的格式对缓存数据进行组装，生成通用数据包之前，还包括：如果缓存数据所属数据类型为预设敏感数据类型，则对缓存数据进行加密。
为了进一步提高数据安全，防止数据泄露，可在进行数据上报时，对预设的敏感数据类型对应的缓存数据进行多级加密，避免明文暴露。例如，若缓存数据所属数据类型属于预设敏感数据类型，则可先对缓存数据进行单独加密，再进行数据组装和整体加密，且单独加密时制定的密钥只对服务器中特定的业务平台暴露，从而对外保障了数据安全，对内实现了数据隔离。
本实施例的技术方案，通过在将缓存数据上报至服务器的过程中，按照预设通用协议的格式对缓存数据进行组装，生成通用数据包，通用数据包中包含有缓存数据所属数据类型的数据类型标识，对通用数据包进行加密后上报至服务器的网关，以使网关按照预设通用协议对通用数据包进行解密和拆分，并根据数据类型标识将拆分后得到的数据分发至服务器中对应的业务平台，利用可复用的通用协议，实现了不同数据类型的统一上报，缩短了开发周期，提高了新增业务的开发效率。
在上述各实施例的基础上，提供如图2b所示的数据上报流程，主要包括四大部分：数据来源、策略逻辑、组装上报和数据分发。其中，APP启动后，可从服务器上下载数据配置文件(包括各数据类型对应的数据类型标识、最大缓存条数以及上报时间间隔)，同时，从APP数据库中提取之前未上报成功的数据，并进行重新上报。当有新数据产生时，为每条数据生成唯一ID，并缓存至APP数据库，同时判断产生的数据所属数据类型是否满足数据上报条件，若是，则从APP数据库中提取对应数据类型下的所有缓存数据，反之则继续等待新数据的产生。对从APP数据库中取出的该数据类型下缓存的原始数据进行敏感数据单独加密，并使用通用协议对数据进行组装，对组装后的数据进行整体二次加密后，发起网络请求至服务器网关，网关接收到该数据包后对整体数据外层进行解密，再使用通用协议对数据进行拆分后，根据数据类型分发到各业务平台。与此同时，网关还可反馈请求是否成功，若请求成功，则通知APP数据库删除对应ID的数据。
实施例三
图3为本发明实施例三提供的一种数据上报装置的结构示意图。参考图3，数据上报装置包括：上报条件判断模块310、缓存数据提取模块320以及缓存数据上报模块330，下面对各模块进行具体说明。
上报条件判断模块310，用于在检测到目标应用启动后有新数据产生时，将所述新数据缓存至缓存数据库中，并根据与所述新数据所属数据类型对应的数据配置参数判断所述数据类型是否满足数据上报条件；
缓存数据提取模块320，用于如果确定满足数据上报条件，则从所述缓存数据库中提取与所述数据类型对应的缓存数据；
缓存数据上报模块330，用于将所述缓存数据上报至服务器。
本实施例提供的数据上报装置，通过在检测到目标应用启动后有新数据产生时，将该新数据缓存至缓存数据库中，并根据与该新数据所属数据类型对应的数据配置参数判断此数据类型是否满足数据上报条件，在确定满足数据上报条件的情况下，从缓存数据库中提取与此数据类型对应的缓存数据，进而将所述缓存数据上报至服务器，利用对不同的数据类型采取不同的数据上报策略，解决了现有技术中因对所有数据类型的数据均采用实时上报的策略，而导致APP性能受到影响、设备耗电量增大、用户体验差的问题，实现了同一时间段内数据上报数量可控，降低设备耗电量，避免抢占内存资源，提高APP性能，提升用户体验的效果。
可选的，所述数据配置参数可以包括：数据类型标识、最大缓存条数以及上报时间间隔。
可选的，缓存数据提取模块320具体可以用于：
确定所述缓存数据库中，与所述新数据所属数据类型对应的缓存数据的条数，达到所述数据类型的最大缓存条数；或，
确定所述新数据所属数据类型的最近数据上报时间与当前系统时间之间的间隔，达到所述数据类型的上报时间间隔。
可选的，数据上报装置还可以包括：
配置文件获取模块，用于在检测到所述目标应用启动时，从服务器获取最新数据配置文件；
配置文件更新模块，用于将所述最新数据配置文件对本地存储的数据配置文件进行更新；
其中，所述数据配置文件中包含有各数据类型对应的数据配置参数。
可选的，缓存数据上报模块330具体可以用于：
按照预设通用协议的格式对所述缓存数据进行组装，生成通用数据包，所述通用数据包中包含有所述缓存数据所属数据类型的数据类型标识；
对所述通用数据包进行加密后上报至服务器的网关，以使所述网关按照所述预设通用协议对所述通用数据包进行解密和拆分，并根据所述数据类型标识将拆分后得到的数据分发至所述服务器中对应的业务平台。
可选的，缓存数据上报模块330具体还可以用于：
在按照预设通用协议的格式对所述缓存数据进行组装，生成通用数据包之前，如果所述缓存数据所属数据类型为预设敏感数据类型，则对所述缓存数据进行加密。
可选的，数据上报装置还可以包括：
反馈信息接收模块，用于接收所述服务器发送的上报反馈信息；
缓存数据删除模块，用于如果所述上报反馈信息为上报成功，则从所述缓存数据库中删除所述缓存数据；
数据重新上报模块，用于如果所述上报反馈信息为上报失败，则在所述目标应用下次启动时，重新将所述缓存数据上报至所述服务器。
上述产品可执行本发明任意实施例所提供的方法，具备执行方法相应的功能模块和有益效果。
实施例四
图4为本发明实施例四提供的一种计算机设备的结构示意图，如图4所示，本实施例提供的一种计算机设备，包括：处理器41和存储器42。该计算机设备中的处理器可以是一个或多个，图4中以一个处理器41为例，所述计算机设备中的处理器41和存储器42可以通过总线或其他方式连接，图4中以通过总线连接为例。
本实施例中计算机设备的处理器41中集成了上述实施例提供的数据上报装置。此外，该计算机设备中的存储器42作为一种计算机可读存储介质，可用于存储一个或多个程序，所述程序可以是软件程序、计算机可执行程序以及模块，如本发明实施例中数据上报方法对应的程序指令/模块(例如，附图3所示的数据上报装置中的模块，包括：上报条件判断模块310、缓存数据提取模块320以及缓存数据上报模块330)。处理器41通过运行存储在存储器42中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述方法实施例中数据上报方法。
存储器42可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据设备的使用所创建的数据等。此外，存储器42可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器42可进一步包括相对于处理器41远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
并且，当上述计算机设备所包括一个或者多个程序被所述一个或者多个处理器41执行时，程序进行如下操作：
在检测到目标应用启动后有新数据产生时，将新数据缓存至缓存数据库中，并根据与新数据所属数据类型对应的数据配置参数判断数据类型是否满足数据上报条件；如果确定满足数据上报条件，则从缓存数据库中提取与数据类型对应的缓存数据；将缓存数据上报至服务器。
实施例五
本发明实施例五还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被数据上报装置执行时实现如本发明实施例一提供的数据上报方法，该方法包括：在检测到目标应用启动后有新数据产生时，将新数据缓存至缓存数据库中，并根据与新数据所属数据类型对应的数据配置参数判断数据类型是否满足数据上报条件；如果确定满足数据上报条件，则从缓存数据库中提取与数据类型对应的缓存数据；将缓存数据上报至服务器。
当然,本发明实施例所提供的一种计算机可读存储介质,其上存储的计算机程序被执行时不限于实现如上所述的方法操作,还可以实现本发明任意实施例所提供的数据上报方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述数据上报装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种数据上报方法，其特征在于，包括：
在检测到目标应用启动后有新数据产生时，将所述新数据缓存至缓存数据库中，并根据与所述新数据所属数据类型对应的数据配置参数判断所述数据类型是否满足数据上报条件；
如果确定满足数据上报条件，则从所述缓存数据库中提取与所述数据类型对应的缓存数据；
将所述缓存数据上报至服务器。
2.根据权利要求1所述的方法，其特征在于，所述数据配置参数包括：数据类型标识、最大缓存条数以及上报时间间隔。
3.根据权利要求2所述的方法，其特征在于，确定满足数据上报条件，包括：
确定所述缓存数据库中，与所述新数据所属数据类型对应的缓存数据的条数，达到所述数据类型的最大缓存条数；或，
确定所述新数据所属数据类型的最近数据上报时间与当前系统时间之间的间隔，达到所述数据类型的上报时间间隔。
4.根据权利要求1所述的方法，其特征在于，还包括：
在检测到所述目标应用启动时，从服务器获取最新数据配置文件；
将所述最新数据配置文件对本地存储的数据配置文件进行更新；
其中，所述数据配置文件中包含有各数据类型对应的数据配置参数。
5.根据权利要求1所述的方法，其特征在于，将所述缓存数据上报至服务器，包括：
按照预设通用协议的格式对所述缓存数据进行组装，生成通用数据包，所述通用数据包中包含有所述缓存数据所属数据类型的数据类型标识；
对所述通用数据包进行加密后上报至服务器的网关，以使所述网关按照所述预设通用协议对所述通用数据包进行解密和拆分，并根据所述数据类型标识将拆分后得到的数据分发至所述服务器中对应的业务平台。
6.根据权利要求5所述的方法，其特征在于，在按照预设通用协议的格式对所述缓存数据进行组装，生成通用数据包之前，还包括：
如果所述缓存数据所属数据类型为预设敏感数据类型，则对所述缓存数据进行加密。
7.根据权利要求1所述的方法，其特征在于，还包括：
接收所述服务器发送的上报反馈信息；
如果所述上报反馈信息为上报成功，则从所述缓存数据库中删除所述缓存数据；
如果所述上报反馈信息为上报失败，则在所述目标应用下次启动时，重新将所述缓存数据上报至所述服务器。
8.一种数据上报装置，其特征在于，包括：
上报条件判断模块，用于在检测到目标应用启动后有新数据产生时，将所述新数据缓存至缓存数据库中，并根据与所述新数据所属数据类型对应的数据配置参数判断所述数据类型是否满足数据上报条件；
缓存数据提取模块，用于如果确定满足数据上报条件，则从所述缓存数据库中提取与所述数据类型对应的缓存数据；
缓存数据上报模块，用于将所述缓存数据上报至服务器。
9.一种计算机设备，其特征在于，所述设备包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据上报方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一所述的数据上报方法。
CN201910105238.3A 2019-02-01 2019-02-01 数据上报方法、装置、设备及存储介质 Pending CN109618331A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910105238.3A CN109618331A (zh) 2019-02-01 2019-02-01 数据上报方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910105238.3A CN109618331A (zh) 2019-02-01 2019-02-01 数据上报方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN109618331A true CN109618331A (zh) 2019-04-12

Family

ID=66021764

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910105238.3A Pending CN109618331A (zh) 2019-02-01 2019-02-01 数据上报方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN109618331A (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110099132A (zh) * 2019-05-21 2019-08-06 逍牛网络科技(上海)有限公司 一种数据同步方法、装置、系统、设备和存储介质
CN110704439A (zh) * 2019-09-27 2020-01-17 北京智道合创科技有限公司 数据存储方法及装置
CN111177625A (zh) * 2019-12-24 2020-05-19 深圳市优必选科技股份有限公司 数据获取方法、数据上报方法、终端设备及存储介质
CN111385365A (zh) * 2020-03-23 2020-07-07 广州极晟网络技术有限公司 上报数据的处理方法、装置、计算机设备和存储介质
CN111988401A (zh) * 2020-08-20 2020-11-24 支付宝(杭州)信息技术有限公司 数据上传方法及装置
CN112019445A (zh) * 2020-07-31 2020-12-01 青岛海尔科技有限公司 用于智能设备流量控制的方法及装置、智能设备
CN112506915A (zh) * 2020-10-27 2021-03-16 百果园技术(新加坡)有限公司 一种应用数据的管理系统以及处理方法、装置和服务器
CN112783664A (zh) * 2019-11-06 2021-05-11 北京沃东天骏信息技术有限公司 确定数据上报策略的方法和装置
CN113037846A (zh) * 2021-03-17 2021-06-25 成都新希望金融信息有限公司 数据上报方法、装置、电子设备和计算机可读存储介质
CN113342536A (zh) * 2021-07-01 2021-09-03 广东电网有限责任公司 一种基于数据云统一数据采集工具的应用数据处理系统
CN113382056A (zh) * 2021-06-07 2021-09-10 北京博睿宏远数据科技股份有限公司 数据上报方法、装置、设备、存储介质及系统
CN113760177A (zh) * 2021-01-04 2021-12-07 北京沃东天骏信息技术有限公司 一种数据的上报方法和装置
CN117493113A (zh) * 2023-11-08 2024-02-02 上海一谈网络科技有限公司 数据上报方法、装置、计算机设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106790380A (zh) * 2016-11-21 2017-05-31 广州华多网络科技有限公司 数据上报方法及装置
CN107181743A (zh) * 2017-05-16 2017-09-19 广州华多网络科技有限公司 网络直播数据上报方法及装置
CN108093439A (zh) * 2017-10-30 2018-05-29 努比亚技术有限公司 用户行为数据上报控制方法、终端及计算机可读存储介质
CN108810098A (zh) * 2018-05-22 2018-11-13 腾讯科技（深圳）有限公司 一种数据上报方法、装置、终端及存储介质
CN108833459A (zh) * 2018-04-09 2018-11-16 平安普惠企业管理有限公司 数据上报方法及终端设备
CN108882223A (zh) * 2018-05-30 2018-11-23 努比亚技术有限公司 应用数据上报方法、移动终端及计算机可读存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106790380A (zh) * 2016-11-21 2017-05-31 广州华多网络科技有限公司 数据上报方法及装置
CN107181743A (zh) * 2017-05-16 2017-09-19 广州华多网络科技有限公司 网络直播数据上报方法及装置
CN108093439A (zh) * 2017-10-30 2018-05-29 努比亚技术有限公司 用户行为数据上报控制方法、终端及计算机可读存储介质
CN108833459A (zh) * 2018-04-09 2018-11-16 平安普惠企业管理有限公司 数据上报方法及终端设备
CN108810098A (zh) * 2018-05-22 2018-11-13 腾讯科技（深圳）有限公司 一种数据上报方法、装置、终端及存储介质
CN108882223A (zh) * 2018-05-30 2018-11-23 努比亚技术有限公司 应用数据上报方法、移动终端及计算机可读存储介质

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110099132A (zh) * 2019-05-21 2019-08-06 逍牛网络科技(上海)有限公司 一种数据同步方法、装置、系统、设备和存储介质
CN110704439B (zh) * 2019-09-27 2022-07-29 北京智道合创科技有限公司 数据存储方法及装置
CN110704439A (zh) * 2019-09-27 2020-01-17 北京智道合创科技有限公司 数据存储方法及装置
CN112783664A (zh) * 2019-11-06 2021-05-11 北京沃东天骏信息技术有限公司 确定数据上报策略的方法和装置
CN111177625A (zh) * 2019-12-24 2020-05-19 深圳市优必选科技股份有限公司 数据获取方法、数据上报方法、终端设备及存储介质
CN111385365A (zh) * 2020-03-23 2020-07-07 广州极晟网络技术有限公司 上报数据的处理方法、装置、计算机设备和存储介质
CN111385365B (zh) * 2020-03-23 2022-09-30 广州极晟网络技术有限公司 上报数据的处理方法、装置、计算机设备和存储介质
CN112019445A (zh) * 2020-07-31 2020-12-01 青岛海尔科技有限公司 用于智能设备流量控制的方法及装置、智能设备
CN112019445B (zh) * 2020-07-31 2024-02-02 青岛海尔科技有限公司 用于智能设备流量控制的方法及装置、智能设备
CN111988401A (zh) * 2020-08-20 2020-11-24 支付宝(杭州)信息技术有限公司 数据上传方法及装置
CN112506915A (zh) * 2020-10-27 2021-03-16 百果园技术(新加坡)有限公司 一种应用数据的管理系统以及处理方法、装置和服务器
CN112506915B (zh) * 2020-10-27 2024-05-10 百果园技术(新加坡)有限公司 一种应用数据的管理系统以及处理方法、装置和服务器
CN113760177A (zh) * 2021-01-04 2021-12-07 北京沃东天骏信息技术有限公司 一种数据的上报方法和装置
CN113037846A (zh) * 2021-03-17 2021-06-25 成都新希望金融信息有限公司 数据上报方法、装置、电子设备和计算机可读存储介质
CN113382056A (zh) * 2021-06-07 2021-09-10 北京博睿宏远数据科技股份有限公司 数据上报方法、装置、设备、存储介质及系统
CN113342536A (zh) * 2021-07-01 2021-09-03 广东电网有限责任公司 一种基于数据云统一数据采集工具的应用数据处理系统
CN117493113A (zh) * 2023-11-08 2024-02-02 上海一谈网络科技有限公司 数据上报方法、装置、计算机设备和存储介质

Similar Documents

Publication Publication Date Title
CN109618331A (zh) 数据上报方法、装置、设备及存储介质
CN104317626B (zh) 终端设备中应用软件权限控制的方法、装置和系统
US8209412B2 (en) Methods for managing a plurality of devices using protectable communication protocol, including determination of marketing feedback to assess a response to an advertisement
CN108512849B (zh) 一种访问服务器的握手方法及系统
CN108989189A (zh) 一种基于企业微信的消息推送方法
CN110166547B (zh) 终端远程访问控制方法
CN103999413A (zh) 在云端传送消息的方法和装置
CN111475310B (zh) 消息分享方法、装置和用户数据获取方法、装置
CN102075367B (zh) 控制补丁包下载的方法、系统、客户端及服务器
CN101404575B (zh) 一种更新签名算法的方法和系统
CN111277628B (zh) 服务器配置方法、装置及业务服务器
CN103259866A (zh) 一种多点传输dns区文件的方法和系统
CN110381149B (zh) 数据分发方法、装置以及数据同步方法、装置
CN110045969A (zh) 应用程序安装方法、服务器、系统、设备及存储介质
CN103810419A (zh) 一种应用防卸载方法和设备
CN106021375A (zh) 数据库访问方法及数据库代理节点
CN112130889A (zh) 资源的管理方法和装置、存储介质、电子装置
CN101557421A (zh) 一种网络文件分发方法及其系统
CN106936615A (zh) 一种报文处理方法及装置
CN110928564B (zh) 安全更新应用的方法、业务服务器、集群及存储介质
CN112559252B (zh) 一种基于属性分类的配置数据管理方法及装置
CN112685613B (zh) 一种资源包查询的方法、装置及信息处理系统
CN109194416A (zh) 信息传输方法、装置、计算机设备及存储介质
CN112350875B (zh) 一种配置数据的集中管理配置方法及装置
CN114553727A (zh) 一种基于内容分发网络的数据处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190412

RJ01 Rejection of invention patent application after publication