CN105657473A - 数据处理的方法和装置 - Google Patents

数据处理的方法和装置 Download PDF

Info

Publication number
CN105657473A
CN105657473A CN201510830972.8A CN201510830972A CN105657473A CN 105657473 A CN105657473 A CN 105657473A CN 201510830972 A CN201510830972 A CN 201510830972A CN 105657473 A CN105657473 A CN 105657473A
Authority
CN
China
Prior art keywords
log
sent
data
determining
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510830972.8A
Other languages
English (en)
Inventor
杜炤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LeTV Cloud Computing Co Ltd
Original Assignee
LeTV Cloud Computing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LeTV Cloud Computing Co Ltd filed Critical LeTV Cloud Computing Co Ltd
Priority to CN201510830972.8A priority Critical patent/CN105657473A/zh
Priority to PCT/CN2016/082821 priority patent/WO2017088382A1/zh
Publication of CN105657473A publication Critical patent/CN105657473A/zh
Priority to US15/245,329 priority patent/US20170150214A1/en
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25833—Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4667—Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Debugging And Monitoring (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一种数据处理的方法和装置，涉及通信技术领域。本发明的方法主要包括：确定待发送日志中相对之前发送的完整日志的变化数据信息，所述完整日志包括全部数据信息；将所述待发送日志中的变化数据信息发送给服务器。与现有技术中直接将生成的日志上报给服务器相比，本发明在发送过完整的日志后，在后续发送日志时，会对待发送日志进行分析，查找出变化的数据信息，并且只向服务器发送变化的数据信息，而不发送固定不变的数据信息。由此可知，终端在向服务器发送生成的日志时，并不是每条日志都发送完整的数据信息，从而使得服务器侧存储的数据量减少，进而提高了服务器侧的资源利用率。

Description

数据处理的方法和装置
技术领域
本发明涉及通信技术领域，尤其涉及一种数据处理的方法和装置。
背景技术
在实际应用中，在视频播放器播放视频的过程中会产生大量的日志，用于记录用户的操作行为、网络状况、视频播放器的版本、终端系统的类型等信息。用户可以通过日志实现检查错误发生的原因、寻找受到攻击时攻击者留下的痕迹等操作；若终端将生成的日志上报给日志服务器，管理员还可以通过日志服务器对各个终端用户的访问行为进行分析。
具体的，在视频播放器播放视频的过程中产生的每一条日志中都会携带设备类型、系统类型、视频播放器的类型以及视频播放器版本等固定不变的信息，以及相对于其他日志的变化信息，例如，用户操作、内存剩余量或者视频数据下载量等信息。现有技术中，终端会将视频播放过程中产生的每一条日志中的所有信息都上报给日志服务器，而管理员通过日志服务器对日志进行分析获取某终端的基本信息时，只需查看对应该终端的一条日志中的信息即可。因此，如果各个终端都将完整的日志上报给日志服务器进行保存，会占用日志服务器大量的存储空间，从而造成资源浪费的现象。
发明内容
本发明实施例提供一种数据处理的方法和装置，用以解决现有技术因各个终端都向服务器上报完整的日志，会占用服务器大量的存储空间，从而造成资源浪费的问题。
一方面，本发明实施例提供一种数据处理的方法，所述方法包括：
确定待发送日志中相对之前发送的完整日志的变化数据信息，所述完整日志包括全部数据信息；
将所述待发送日志中的变化数据信息发送给服务器。
另一方面，本发明实施例提供一种数据处理的装置，所述装置包括：
确定单元，用于确定待发送日志中相对之前发送的完整日志的变化数据信息，所述完整日志包括全部数据信息；
发送单元，用于将所述确定单元确定的所述待发送日志中的变化数据信息发送给服务器。
本发明实施例提供的数据处理的方法和装置，能够在向服务器发送过完整的日志后，在后续向服务器发送日志前，会对待发送日志进行分析，查找出待发送日志相对之前发送的完整日志的变化数据信息，并且只向服务器发送该日志中的变化数据信息，而并不发送固定不变的数据信息。由此可知，终端在向服务器发送生成的日志时，并不是每条日志都发送完整的数据信息，从而使得服务器侧存储的数据量减少，进而提高了服务器侧的资源利用率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明提供的一种数据处理的方法的流程图；
图2为本发明提供的另一种数据处理的方法的流程图；
图3为本发明提供的一种数据处理的装置的组成框图；
图4为本发明提供的另一种数据处理的装置的组成框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供了一种数据处理的方法，如图1所示，该方法包括：
101、确定待发送日志中相对之前发送的完整日志的变化数据信息。
其中，本步骤中所提及的日志是视频播放器播放视频的过程中生成的日志。在实际应用中，视频播放器播放视频时生成的日志大致可以分为两类：动作日志和心跳日志。其中，动作日志中包括与特定动作相关的数据信息，例如，暂停、快进和快退等；心跳日志中包括与视频播放有关的会持续变化的数据信息，例如，视频播放过程中终端的内存占用量以及视频下载量等。
需要说明的是，完整日志包括全部数据信息，也就是说完整日志即为生成的日志。此外，在将待发送日志发送至服务器之前，发送的完整日志可以只有一条，也可以有多条，并且也不限定是哪一条或者哪几条。
102、将待发送日志中的变化数据信息发送给服务器。
由于终端之前向服务器发送过含有全部数据信息的完整日志，所以管理人员在根据日志分析用户行为时，通过之前发送的完整日志即可获知用户所使用的终端的基本信息以及所播放视频的基本信息。由此可知，为了节省服务器侧的资源，可以仅将待发送日志相对之前发送的完整日志的变化数据信息发送给服务器，而无需发送固定不变的数据信息。
需要说明的是，本发明实施例中提及的服务器可以为专门用于存储日志的日志服务器，也可以为其他服务器，在此不作限定。
本发明实施例提供的数据处理的方法，能够在向服务器发送过完整的日志后，在后续向服务器发送日志前，会对待发送日志进行分析，查找出待发送日志相对于之前发送的完整日志的变化数据信息，并且只向服务器发送该日志中的变化数据信息，而并不发送固定不变的数据信息。由此可知，终端在向服务器发送生成的日志时，并不是每条日志都发送完整的数据信息，从而使得服务器侧存储的数据量减少，进而提高了服务器侧的资源利用率。
进一步的，在实际应用中，终端使用同一个视频播放器播放同一视频的过程中产生的各个日志中含有用于描述该视频基本信息的固定不变的数据信息，例如，用于标识视频的视频编号。因此，日志中固定不变的数据信息可以包括用于描述终端的基本信息中固定不变的数据信息以及用于描述视频的基本信息中固定不变的数据信息。为了进一步减少服务器侧存储的日志的数据量，在向服务器上报播放某视频的过程中生成的日志时，可以仅上报一次固定不变的数据信息(即只上报一条完整的日志)，而其他日志可以仅上报变化数据信息。
具体的，为了让管理员能够确定哪些日志是对应视频A的日志，哪些日志是对应视频B的日志，可以直接上报播放某视频的过程中生成的第一条日志，而对于后续的与该视频对应的其他日志可以只上报变化数据信息。也就是说，上述步骤101的具体实现方式可以为确定待发送日志中相对之前发送的初始日志的变化数据信息，其中，初始日志为视频播放器播放视频时生成的第一条日志。
示例性的，若用户使用某视频播放器先后播放了两个视频，其中，在播放第一个视频的过程中生成了50条日志，在播放第二个视频的过程中生成了60条日志，则终端向服务器发送的110条日志的内容为第一个视频的第1条日志是完整的日志，第一个视频的第2条至第50条日志是只含有变化数据信息的日志，第二个视频的第1条日志是完整的日志，第二个视频的第2条至第60条日志是只含有变化数据信息的日志。
进一步的，依据上述实施例，本发明的另一个实施例还提供了一种数据处理的方法，如图2所示，该方法包括：
201、从待发送日志中提取动态数据。
其中，动态数据为在播放视频的过程中生成的日志中变化的数据，即除固定不变的数据信息以外的数据。
在实际应用中，从待发送日志中提取动态数据的具体实现方式可以为：
A1、确定待发送日志中的静态数据。
其中，静态数据为在播放视频的过程中生成的日志中固定不变的数据，即上述实施例中提及的用于描述终端的基本信息中固定不变的数据以及用于描述视频的基本信息中固定不变的数据。
具体的，在实际应用中，确定待发送日志中静态数据的具体实现方式有多种，下面以以下两种方式为例进行详细介绍：
方式一：通过将待发送日志与完整日志进行比较，查找出待发送日志中与完整日志相同的数据，并将查找出的数据确定为静态数据。
具体的，在发送待发送日志之前，终端已向服务器发送了至少一条完整的日志，因此，终端可以选择一条之前发送的完整日志作为比较对象，从中查找出两者相同的数据，并将查找出的数据确定为静态数据。
需要说明的是，若终端中的原始日志(即播放视频时生成的日志)仍然保留，则在确定待发送日志中的静态数据时，终端也可以将待发送日志与原始日志中的某条日志相比较，查找出两者相同的数据，并将查找出的数据确定为静态数据。
方式二：从待发送日志中查找与预设属性信息对应的数据，并将查找出的与预设属性信息对应的数据确定为静态数据。
其中，预设属性信息包括与固定不变的数据相关的属性信息，例如，设备品牌、设备型号、设备内存容量、设备内置存储容量、设备外部扩展存储容量、设备操作系统、设备CPU(CentralProcessingUnit，中央处理器)型号、设备CPU频率、设备CPU核数、设备屏幕分辨率、视频编号以及视频渠道号等。终端在确定待发送日志中的静态数据时，会扫描该日志中的每个属性的数据信息，并将扫描的当前属性信息与预设的各个属性信息分别进行匹配，若当前属性信息与预设的某个属性信息匹配成功，则将该属性信息对应的数据确定为静态数据。
A2、将待发送日志中除静态数据以外的数据确定为动态数据。
A3、提取待发送日志中的动态数据。
需要说明的是，本步骤是从原始的日志中提取动态数据，而对原始日志并没有影响，若需要将原始日志删除，则可以将原始日志删除，若需要保留原始日志，则可以保留原始日志，若需要节省终端侧的存储空间，则可以将原始日志中的静态数据删除，只保留动态数据。
202、将动态数据确定为待发送日志中相对之前发送的完整日志的变化数据信息。
其中，动态数据是在播放视频的过程中生成的日志中变化的数据，因此，待发送日志中的动态数据是相对之前发送的完整日志的变化数据，也是相对播放视频的过程中生成的任何一条日志的变化数据。
203、将待发送日志中的变化数据信息发送给服务器。
本步骤的实现方式与图1中步骤102的实现方式相同，此处不再赘述。
进一步的，为了优化终端的存储空间，从而提高终端的资源利用率，当终端保存视频播放器播放某视频的过程中生成的日志时，可以只保存预设条数(例如只保存一条)的完整日志，而对于其他日志则只保存动态数据。也就是说，终端在确定待发送日志中相对之前发送的完整日志的变化数据信息之后，可以只将待发送日志中的变化数据信息保存到本地，而不保存待发送日志中的固定不变的数据(即静态数据)。
进一步的，依据上述方法实施例，本发明的另一个实施例还提供了一种数据处理的装置，该装置应用于终端当中，如图3所示，该装置包括：确定单元31和发送单元32。其中，
确定单元31，用于确定待发送日志中相对之前发送的完整日志的变化数据信息，所述完整日志包括全部数据信息；
其中，日志是视频播放器播放视频的过程中生成的日志。在实际应用中，视频播放器播放视频时生成的日志大致可以分为两类：动作日志和心跳日志。其中，动作日志中包括与特定动作相关的数据信息，例如，暂停、快进和快退等；心跳日志中包括与视频播放有关的会持续变化的数据信息，例如，视频播放过程中终端的内存占用量以及视频下载量等。
此外，在发送单元32将待发送日志发送至服务器之前，发送的完整日志可以只有一条，也可以有多条，并且也不限定是哪一条或者哪几条。
发送单元32，用于将确定单元31确定的待发送日志中的变化数据信息发送给服务器。
需要说明的是，本发明实施例中提及的服务器可以为专门用于存储日志的日志服务器，也可以为其他服务器，在此不作限定。
本发明实施例提供的数据处理的装置，能够在向服务器发送过完整的日志后，在后续向服务器发送日志前，会对待发送日志进行分析，查找出待发送日志相对于之前发送的完整日志的变化数据信息，并且只向服务器发送该日志中的变化数据信息，而并不发送固定不变的数据信息。由此可知，终端在向服务器发送生成的日志时，并不是每条日志都发送完整的数据信息，从而使得服务器侧存储的数据量减少，进而提高了服务器侧的资源利用率。
进一步的，确定单元31，用于确定待发送日志中相对之前发送的初始日志的变化数据信息，初始日志为视频播放器播放视频时生成的第一条日志。
进一步的，如图4所示，确定单元31，包括：
提取子单元311，用于从待发送日志中提取动态数据，动态数据为在播放视频的过程中生成的日志中变化的数据；
确定子单元312，用于将提取子单元311提取的动态数据确定为变化数据信息。
其中，动态数据是在播放视频的过程中生成的日志中变化的数据，因此，待发送日志中的动态数据是相对之前发送的完整日志的变化数据，也是相对播放视频的过程中生成的任何一条日志的变化数据。
进一步的，如图4所示，提取子单元311，包括：
确定模块3111，用于确定待发送日志中的静态数据，静态数据为在播放视频的过程中生成的日志中固定不变的数据；
在实际应用中，静态数据主要包括用于描述终端的基本信息中固定不变的数据信息以及用于描述视频的基本信息中固定不变的数据信息。
确定模块3111，还用于将待发送日志中除静态数据以外的数据确定为动态数据；
提取模块3112，用于提取确定模块3111确定的待发送日志中的动态数据。
需要说明的是，提取模块3112是从原始的日志中提取动态数据，而对原始日志并没有影响，若需要将原始日志删除，则可以将原始日志删除，若需要保留原始日志，则可以保留原始日志，若需要节省终端侧的存储空间，则可以将原始日志中的静态数据删除，只保留动态数据。
进一步的，确定模块3111，用于通过将待发送日志与完整日志进行比较，查找出待发送日志中与完整日志相同的数据；将查找出的数据确定为静态数据。
需要说明的是，若终端中的原始日志(即播放视频时生成的日志)仍然保留，则在确定模块3111确定待发送日志中的静态数据时，也可以将待发送日志与原始日志中的某条日志相比较，查找出两者相同的数据，并将查找出的数据确定为静态数据。
进一步的，确定模块3111，用于从待发送日志中查找与预设属性信息对应的数据；将查找出的与预设属性信息对应的数据确定为静态数据。
其中，预设属性信息包括与固定不变的数据相关的属性信息，例如，设备品牌、设备型号、设备内存容量、设备内置存储容量、设备外部扩展存储容量、设备操作系统、设备CPU(CentralProcessingUnit，中央处理器)型号、设备CPU频率、设备CPU核数、设备屏幕分辨率、视频编号以及视频渠道号等。确定模块3111在确定待发送日志中的静态数据时，会扫描该日志中的每个属性的数据信息，并将扫描的当前属性信息与预设的各个属性信息分别进行匹配，若当前属性信息与预设的某个属性信息匹配成功，则将该属性信息对应的数据确定为静态数据。
进一步的，如图4所示，该装置还包括：
保存单元33，用于保存待发送日志中的变化数据信息；
删除单元34，用于删除待发送日志中的其他数据信息。
需要说明的是，保存单元33会保存发送单元32之前发送的完整日志。通过只保存之前发送的完整日志以及只保存其他日志中的动态数据，而不保存其他日志中的静态数据，从而使得终端本地存储的日志的数据量减少，进而提高终端的资源利用率。
该装置实施例与前述方法实施例对应，为便于阅读，本装置实施例不再对前述方法实施例中的细节内容进行逐一赘述，但应当明确，本实施例中的装置能够对应实现前述方法实施例中的全部内容。
上述数据处理的装置包括存储器和处理器，上述确定单元、发送单元、和保存单元等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (14)

1.一种数据处理的方法，其特征在于，所述方法包括：
确定待发送日志中相对之前发送的完整日志的变化数据信息，所述完整日志包括全部数据信息；
将所述待发送日志中的变化数据信息发送给服务器。
2.根据权利要求1所述的方法，其特征在于，确定待发送日志中相对之前发送的完整日志的变化数据信息，包括：
确定所述待发送日志中相对之前发送的初始日志的变化数据信息，所述初始日志为视频播放器播放视频时生成的第一条日志。
3.根据权利要求1所述的方法，其特征在于，确定待发送日志中相对之前发送的完整日志的变化数据信息，包括：
从所述待发送日志中提取动态数据，所述动态数据为在播放视频的过程中生成的日志中变化的数据；
将所述动态数据确定为所述变化数据信息。
4.根据权利要求3所述的方法，其特征在于，从所述待发送日志中提取动态数据，包括：
确定所述待发送日志中的静态数据，所述静态数据为在播放所述视频的过程中生成的日志中固定不变的数据；
将所述待发送日志中除所述静态数据以外的数据确定为动态数据；
提取所述待发送日志中的动态数据。
5.根据权利要求4所述的方法，其特征在于，确定所述待发送日志中的静态数据，包括：
通过将所述待发送日志与所述完整日志进行比较，查找出所述待发送日志中与所述完整日志相同的数据；
将查找出的数据确定为静态数据。
6.根据权利要求4所述的方法，其特征在于，确定所述待发送日志中的静态数据，包括：
从所述待发送日志中查找与预设属性信息对应的数据；
将查找出的与预设属性信息对应的数据确定为静态数据。
7.根据权利要求1至6中任一项所述的方法，其特征在于，所述方法进一步包括：
保存所述待发送日志中的变化数据信息，删除所述待发送日志中的其他数据信息。
8.一种数据处理的装置，其特征在于，所述装置包括：
确定单元，用于确定待发送日志中相对之前发送的完整日志的变化数据信息，所述完整日志包括全部数据信息；
发送单元，用于将所述确定单元确定的所述待发送日志中的变化数据信息发送给服务器。
9.根据权利要求8所述的装置，其特征在于，所述确定单元，用于确定所述待发送日志中相对之前发送的初始日志的变化数据信息，所述初始日志为视频播放器播放视频时生成的第一条日志。
10.根据权利要求8所述的装置，其特征在于，所述确定单元，包括：
提取子单元，用于从所述待发送日志中提取动态数据，所述动态数据为在播放视频的过程中生成的日志中变化的数据；
确定子单元，用于将所述提取子单元提取的所述动态数据确定为所述变化数据信息。
11.根据权利要求10所述的装置，其特征在于，所述提取子单元，包括：
确定模块，用于确定所述待发送日志中的静态数据，所述静态数据为在播放所述视频的过程中生成的日志中固定不变的数据；
所述确定模块，还用于将所述待发送日志中除所述静态数据以外的数据确定为动态数据；
提取模块，用于提取所述确定模块确定的所述待发送日志中的动态数据。
12.根据权利要求11所述的装置，其特征在于，所述确定模块，用于通过将所述待发送日志与所述完整日志进行比较，查找出所述待发送日志中与所述完整日志相同的数据；将查找出的数据确定为静态数据。
13.根据权利要求11所述的装置，其特征在于，所述确定模块，用于从所述待发送日志中查找与预设属性信息对应的数据；将查找出的与预设属性信息对应的数据确定为静态数据。
14.根据权利要求8至13中任一项所述的装置，其特征在于，所述装置进一步包括：
保存单元，用于保存所述待发送日志中的变化数据信息；
删除单元，用于删除所述待发送日志中的其他数据信息。
CN201510830972.8A 2015-11-25 2015-11-25 数据处理的方法和装置 Pending CN105657473A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201510830972.8A CN105657473A (zh) 2015-11-25 2015-11-25 数据处理的方法和装置
PCT/CN2016/082821 WO2017088382A1 (zh) 2015-11-25 2016-05-20 数据处理的方法和装置
US15/245,329 US20170150214A1 (en) 2015-11-25 2016-08-24 Method and apparatus for data processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510830972.8A CN105657473A (zh) 2015-11-25 2015-11-25 数据处理的方法和装置

Publications (1)

Publication Number Publication Date
CN105657473A true CN105657473A (zh) 2016-06-08

Family

ID=56481858

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510830972.8A Pending CN105657473A (zh) 2015-11-25 2015-11-25 数据处理的方法和装置

Country Status (2)

Country Link
CN (1) CN105657473A (zh)
WO (1) WO2017088382A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105979299A (zh) * 2016-06-24 2016-09-28 武汉斗鱼网络科技有限公司 基于时间轮盘和播放器心跳的活跃用户集维护系统及方法
CN108255421A (zh) * 2016-12-28 2018-07-06 富士通株式会社 存储控制设备、存储管理系统和存储管理方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014152A (zh) * 2010-10-18 2011-04-13 浪潮(北京)电子信息产业有限公司 一种远程复制系统及其方法
CN102779087A (zh) * 2011-05-06 2012-11-14 Sap股份公司 业务过程日志记录的系统和方法
CN103617283A (zh) * 2013-12-11 2014-03-05 北京京东尚科信息技术有限公司 一种存储日志的方法及装置
CN104092976A (zh) * 2014-06-19 2014-10-08 兰捷尔智能科技有限公司 实现环境设备监控系统报警与视频监控系统联动的方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102164043A (zh) * 2010-10-27 2011-08-24 青岛海信传媒网络技术有限公司 日志上报方法及终端
US20120123949A1 (en) * 2010-11-17 2012-05-17 Shreyank Gupta Method and system to automatically modify task status in a project management system via keywords in source code version control commit logs
KR20140031451A (ko) * 2012-08-30 2014-03-13 삼성전자주식회사 클라우드 시스템의 컨텐츠 동기화장치 및 방법
WO2015033410A1 (ja) * 2013-09-04 2015-03-12 株式会社東芝 情報処理システム、サーバ装置、情報処理方法及びプログラム
CN103731682B (zh) * 2014-01-26 2017-09-22 飞狐信息技术（天津）有限公司 多种观影设备之间保持同步观看记录的方法、设备及系统
CN104915460A (zh) * 2015-07-10 2015-09-16 上海斐讯数据通信技术有限公司 一种日志存储方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014152A (zh) * 2010-10-18 2011-04-13 浪潮(北京)电子信息产业有限公司 一种远程复制系统及其方法
CN102779087A (zh) * 2011-05-06 2012-11-14 Sap股份公司 业务过程日志记录的系统和方法
CN103617283A (zh) * 2013-12-11 2014-03-05 北京京东尚科信息技术有限公司 一种存储日志的方法及装置
CN104092976A (zh) * 2014-06-19 2014-10-08 兰捷尔智能科技有限公司 实现环境设备监控系统报警与视频监控系统联动的方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105979299A (zh) * 2016-06-24 2016-09-28 武汉斗鱼网络科技有限公司 基于时间轮盘和播放器心跳的活跃用户集维护系统及方法
CN105979299B (zh) * 2016-06-24 2019-06-04 武汉斗鱼网络科技有限公司 基于时间轮盘和播放器心跳的活跃用户集维护系统及方法
CN108255421A (zh) * 2016-12-28 2018-07-06 富士通株式会社 存储控制设备、存储管理系统和存储管理方法

Also Published As

Publication number Publication date
WO2017088382A1 (zh) 2017-06-01

Similar Documents

Publication Publication Date Title
CN107688488B (zh) 一种基于元数据的任务调度的优化方法及装置
CN107656968B (zh) 大批量业务数据导出方法及系统
CN109684008B (zh) 卡片渲染方法、装置、终端及计算机可读存储介质
US11151089B2 (en) Compression of log data using pattern recognition
US10313712B2 (en) Method, device, and server for producing video frame set
CN107896170B (zh) 保险应用系统的监控方法及装置
CN108228322B (zh) 一种分布式链路跟踪、分析方法及服务器、全局调度器
US20170150214A1 (en) Method and apparatus for data processing
CN106844550B (zh) 一种虚拟化平台操作推荐方法及装置
CN111182332B (zh) 视频处理方法、装置、服务器及存储介质
CN110807009B (zh) 文件处理方法及装置
CN116049109A (zh) 一种基于过滤器的文件校验方法、系统、设备和介质
CN110597461B (zh) 块链式账本中的数据存储方法、装置及设备
CN110222046B (zh) 列表数据的处理方法、装置、服务器和存储介质
CN115039082A (zh) 日志写入方法、装置、电子设备以及存储介质
CN111078900A (zh) 一种数据的风险识别方法及系统
CN105872731A (zh) 数据处理的方法和装置
CN105657473A (zh) 数据处理的方法和装置
CN111506747B (zh) 文件解析方法、装置、电子设备及存储介质
CN110442439B (zh) 任务进程处理方法、装置和计算机设备
CN107291743B (zh) 数据的调用方法和装置
CN104834728B (zh) 一种订阅视频的推送方法及装置
CN113297267A (zh) 数据缓存和任务处理方法、装置、设备以及存储介质
CN113992730A (zh) 一种基于知识构建的用户行为模拟方法、模拟系统、定制系统、计算机及存储介质
KR102193157B1 (ko) 컨테이너 서비스 제공을 위한 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160608

WD01 Invention patent application deemed withdrawn after publication