CN111787082B - 一种多级业务数据上报的方法、设备及系统 - Google Patents
一种多级业务数据上报的方法、设备及系统 Download PDFInfo
- Publication number
- CN111787082B CN111787082B CN202010576639.XA CN202010576639A CN111787082B CN 111787082 B CN111787082 B CN 111787082B CN 202010576639 A CN202010576639 A CN 202010576639A CN 111787082 B CN111787082 B CN 111787082B
- Authority
- CN
- China
- Prior art keywords
- service data
- data
- reporting
- cache
- new service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 238000012545 processing Methods 0.000 claims abstract description 12
- 230000001960 triggered effect Effects 0.000 claims description 31
- 238000007405 data analysis Methods 0.000 claims description 29
- 230000008569 process Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 5
- 230000004044 response Effects 0.000 claims description 2
- 238000004378 air conditioning Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
- H04L67/5682—Policies or rules for updating, deleting or replacing the stored data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/174—Redundancy elimination performed by the file system
- G06F16/1748—De-duplication implemented within the file system, e.g. based on file segments
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明提供一种多级业务数据上报的方法、设备及系统,该方法应用于多级业务数据上报系统中的用户设备,包括:响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器。本发明提供的多级业务数据上报的方法、设备及系统,解决了现有数据上报方法存在的数据频繁上报造成的服务器与网络压力过大及数据处理成本大的问题。
Description
技术领域
本发明涉及物联网技术领域,特别涉及一种多级业务数据上报的方法、设备及系统。
背景技术
目前随着物联网行业的不断发展,越来越多的设备加入到物联网中,物联网利用局部网络或互联网等通信技术把传感器、控制器、智能设备、用户等通过新的方式联在一起,形成人与物、物与物相联、能够远程管理控制的智能化网络。但是,如何对物联网中的设备进行便捷高效的智能化管理控制是目前需解决的问题。
目前已实现的设备控制包括设备远程控制、设备联动控制等交互模式,但这些控制方法仍然停留在用户主动改变设备状态的阶段。为了进一步提升用户体验,可以通过对用户的设备使用状态进行大数据分析,从而实现对设备状态的实时控制,达到设备随着环境的变化自动调节的效果,而无需对设备进行手动调整。
对用户的设备使用状态进行大数据分析就需要设备实时上报相关数据,且在上传数据时可能涉及多级服务缓存的数据上报,但大量的设备上报实时数据会对服务器和网络造成巨大的压力。例如,一个用户平均一天操作一台物联网设备的次数大概为8次左右或者更少,并且每操作一次,设备上报一次数据,但是在实时上报数据时,实时频率假设为每3分钟上报一次数据,则一天内设备将会上报480次数据,产生的数据量将是原本的60倍左右,这对于服务器资源和网络资源来说都是巨大的考验。因此,目前的数据上报方法存在数据频繁上报造成的服务器与网络压力过大及数据处理成本大的问题。
发明内容
本发明提供了一种多级业务数据上报的方法、设备及系统,用以解决现有数据上报方法存在的数据频繁上报造成的服务器与网络压力过大及数据处理成本大的问题。
根据本发明实施例的第一方面,提供一种多级业务数据上报的方法,应用于多级业务数据上报系统中的用户设备,该方法包括:
响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;
若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器。
可选地,还包括:
确定删除冗余重复数据后的新业务数据,与上一次上报的业务数据相同时,删除缓存中的新业务数据。
可选地,还包括:
若缓存中所述新业务数据不存在冗余重复数据,与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,将缓存中的新业务数据上报给上级服务器。
可选地,所述数据上报指令,包括:
到达上报周期时触发的第一数据上报指令;或者
采集到一条新业务数据时,触发的第二数据上报指令。
可选地,所述数据上报指令为第一数据上报指令时,所述删除所述冗余重复数据,并与上一次上报的业务数据比较,包括:
按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;
将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
可选地,将业务数据,执行业务数据比较时,通过如下方式确定两条业务数据是否相同,包括:
若两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
可选地,确定所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期。
根据本发明实施例的第二方面,提供一种用户设备,包括:
数据获取模块,用于响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;
数据上报模块,用于若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器。
可选地,所述数据上报模块还用于:
确定删除冗余重复数据后的新业务数据,与上一次上报的业务数据相同时,删除缓存中的新业务数据。
可选地,所述数据上报模块还用于:
若缓存中所述新业务数据不存在冗余重复数据,与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,将缓存中的新业务数据上报给上级服务器。
可选地,所述数据上报指令,包括:
到达上报周期时触发的第一数据上报指令;或者
采集到一条新业务数据时,触发的第二数据上报指令。
可选地,所述数据上报指令为第一数据上报指令时,所述数据上报模块删除所述冗余重复数据,并与上一次上报的业务数据比较,包括:
按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;
将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
可选地,所述数据上报模块将业务数据,执行业务数据比较时,通过如下方式确定两条业务数据是否相同,包括:
若两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
可选地,所述数据获取模块确定所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期。
根据本发明实施例的第三方面,提供一种用户设备,包括:存储器和处理器;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,包括如下步骤:
响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;
若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器。
可选地,所述处理器还用于:
确定删除冗余重复数据后的新业务数据,与上一次上报的业务数据相同时,删除缓存中的新业务数据。
可选地,所述处理器还用于:
若缓存中所述新业务数据不存在冗余重复数据,与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,将缓存中的新业务数据上报给上级服务器。
可选地,所述数据上报指令,包括:
到达上报周期时触发的第一数据上报指令;或者
采集到一条新业务数据时,触发的第二数据上报指令。
可选地,所述数据上报指令为第一数据上报指令时,所述处理器删除所述冗余重复数据,并与上一次上报的业务数据比较,包括:
按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;
将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
可选地,所述处理器将业务数据,执行业务数据比较时,通过如下方式确定两条业务数据是否相同,包括:
若两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
可选地,所述处理器确定所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期。
根据本发明实施例的第四方面,提供一种多级业务数据上报的系统,包括:
如上述第三方面所述的至少一个用户设备;
至少一级级联的服务器,最低级的服务器与所述用户设备连接,最高级服务器与数据分析设备连接,用于缓存接收的业务数据,响应于数据上报指令,获取缓存中的业务数据,若缓存中存在从上一次上报至当前时间接收的新业务数据,上报所述新业务数据,否则,将当前缓存中业务数据进行上报或不上报;
所述数据分析设备,用于接收业务数据,并对所述业务数据进行数据分析。
可选地,所述数据上报指令,包括:
到达上报周期时触发的第三数据上报指令;或者
接收到一条新业务数据时,触发的第四数据上报指令。
可选地,所述服务器上报所述新业务数据之后,还用于:
将缓存中所述新业务数据中,除最后一条新业务数据之外的其它新业务数据删除。
根据本发明实施例的第五方面,提供一种芯片,所述芯片与用户设备中的存储器耦合,使得所述芯片在运行时调用所述存储器中存储的程序指令,实现本申请实施例上述各个方面以及各个方面涉及的任一可能设计的方法。
根据本发明实施例的第六方面,提供一种计算机可读存储介质,该计算机存储介质存储有程序指令,当其在计算机上运行时,使得计算机执行本发明实施例上述各个方面以及各个方面涉及的任一可能设计的方法。
根据本发明实施例的第七方面,提供一种计算机程序产品,当所述计算机程序产品在电子设备上运行时,使得所述电子设备执行实现本申请实施例上述各个方面以及各个方面涉及的任一可能设计的方法。
利用本发明提供的多级业务数据上报的方法及设备,具有以下有益效果:
本发明提供的多级业务数据上报的方法、用户设备及系统,用户设备将实时采集的业务数据保存到缓存,在数据上报过程中,响应于数据上报指令,获取缓存中上一次上报至当前时间采集的新业务数据,并对新业务数据中冗余重复业务数据进行过滤后,与上一次上报的业务数据进行对比,确定不完全相同时才上报新业务数据。能够对用户设备采集的业务数据进行重复数据过滤,并在采集到不同业务数据时上报,大大减少重复相同数据的上报,解决了现有数据上报方法存在的数据频繁上报造成的服务器与网络压力过大及数据处理成本大的问题。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中提供的一种多级业务数据上报的方法示意图;
图2为本发明实施例中提供的一种多级业务数据上报的方法流程示意图;
图3为本发明实施例中提供的一种用户设备的示意图;
图4为本发明实施例中提供的一种用户设备的结构示意图;
图5为本发明实施例中提供的一种多级业务数据上报的系统示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
本申请实施例中“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
为了方便理解,下面对本发明实施例中涉及的名词进行解释:
1)物联网(The Internet of Things,IOT):是指通过各种信息传感器、射频识别技术、全球定位系统、红外感应器、激光扫描器等各种装置与技术,实时采集任何需要监控、连接、互动的物体或过程,采集各种需要的信息,通过各类可能的网络接入,实现物与物、物与人的泛在连接,实现对物品和过程的智能化感知、识别和管理;物联网是一个基于互联网、传统电信网等的信息承载体,能让所有能够被独立寻址的普通物理对象形成互联互通的网络。
实施例1
本发明实施例提供一种多级业务数据上报的方法,应用于多级业务数据上报系统中的用户设备,如图1所示,包括:
步骤S101,响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间新采集的业务数据;
鉴于目前的数据实时上报方法中,用户设备实时上报数据会对上级服务器与网络造成较大压力,因此,本发明实施例中,在用户设备数据上报至数据分析服务器的多级上报过程中,减少重复数据的上报和处理,通过系统中各设备对重复数据进行过滤,仅将不同的数据进行上报,从而减少服务器与网络资源的数据处理压力。
本发明实施例中,用户设备为物联网中的用户设备。
本发明实施例中,用户终端收到数据上报指令时,响应于该数据上报指令,采用与该数据上报指令对应的数据上报方法,将采集到的数据上报到上级服务器。
作为一种可选的实施方式,所述数据上报指令为到达上报周期时触发的第一数据上报指令,则用户设备采用周期上报方法,按照所述上报周期,将采集到的数据上报到上级服务器。
具体的,所述数据上报指令为所述第一数据上报指令时,用户设备确定到达上报周期时,触发数据上报,并获取缓存中的业务数据。缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据,其中,上一次上报的业务数据具体为用户设备上一次上报的删除冗余重复数据后的上一周期的业务数据,从上一次上报至当前时间采集的新业务数据具体为当前周期内采集到的业务数据。
上述上报周期,为预设固定周期,和/或,根据上级服务器的指示确定的周期。
具体的,用户设备可以根据上级服务器的指示确定一个周期作为上报周期,确定到达上报周期时,触发数据上报;或者,用户设备将预设的固定周期作为上报周期,到达上报周期时,触发数据上报;或者,将根据上级服务器的指示确定的周期和预设固定周期同时作为上报周期,到达任一周期对应的时间时,触发数据上报。
作为一种可选的实施方式,所述数据上报指令为采集到一条新业务数据时,触发的第二数据上报指令,则用户设备采用逐条上报方法,将采集到的数据上报到上级服务器。
具体的,所述数据上报指令为所述第二数据上报指令时,用户设备确定采集到一条新业务数据时,触发数据上报,并获取缓存中的业务数据。缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据,其中,上一次上报的业务数据具体为用户设备上一次上报的一条业务数据,从上一次上报至当前时间采集的新业务数据具体为当用户设备前采集到的一条新业务数据。
本发明实施例中,用户设备实时采集运行过程中生成的数据,并将采集到的业务数据保存到缓存中。
本发明实施例中,所述业务数据为用户设备运行过程中生成的同一类业务数据,可以为状态特征或具体参数值等形式。用户设备运行过程中生成的不同类业务数据,分别单独进行上报。例如,用户设备为空调时,业务数据可以为空调开关状态、运行模式、温度数据等类别的数据。
步骤S102,若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器。
用户设备获取缓存中新业务数据后,确定新业务数据中是否存在冗余重复业务数据,确定新业务数据中存在冗余重复业务数据时,删除所述冗余重复业务数据并将删除冗余重复业务数据后的新业务数据与上一次上报的业务数据比较,根据比较结果确定新业务数据与上一次上报的业务数据是否相同;确定新业务数据中不存在冗余重复业务数据时,直接将新业务数据与上一次上报的业务数据比较,根据比较结果确定新业务数据与上一次上报的业务数据是否相同。
具体的,在响应的数据上报指令为第一数据上报指令时,按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
上述数据上报指令为第一数据上报指令时,新业务数据为当前周期内采集的业务数据,对当前上报周期内采集的业务数据,按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据。然后,将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。其中,比较当前新业务数据,是否与缓存中前一条新业务数据相同,或者比较新业务数据与上一次上报的业务数据的最后一条是否相同时,若确定比较的两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
例如,假设达到上报周期触发数据上报时,缓存中新业务数据即当前上报周期采集的业务数据包括业务数据1、业务数据2、业务数据3、业务数据4,其中业务数据2、业务数据3为相同业务数据。进行数据上报时,首先确定新业务数据中是否包括冗余重复业务数据,按照采集时间从前到后的顺序,逐条将业务数据与缓存中前一条业务数据比较:业务数据1为缓存中第一条新业务数据,不进行比较,对业务数据2,与业务数据1比较,确定业务数据2与业务数据1为不同业务数据,保留在缓存中,对业务数据3,与业务数据2比较,确定业务数据3与业务数据2为相同业务数据,则确定业务数据3为冗余重复业务数据,将业务数据3从缓存中删除,删除业务数据3后,缓存中新业务数据变为业务数据1、业务数据2、业务数据4,然后,对业务数据4,与缓存中前一条业务数据2比较,确定业务数据4与业务数据2为不同业务数据,保留在缓存中。比较完成后,缓存中新业务数据包括业务数据1、业务数据2、业务数据4。
假设缓存中上一次上报的业务数据为业务数据5、业务数据6,将上述缓存中新业务数据包括的业务数据1、业务数据2、业务数据4分别与上一次上报的业务数据的最后一条业务数据6比较,确定业务数据1、业务数据2、业务数据4中至少一条业务数据与业务数据6不同时,确定新业务数据与上一次上报的业务数据不完全相同。
在响应的数据上报指令为第二数据上报指令时,新业务数据为当前采集的一条业务数据,则新业务数据中不存在冗余重复业务数据,直接将新业务数据与上一次上报的业务数据比较,确定新业务数据与上一次上报的业务数据是否相同。其中,若确定比较的两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
上述用户设备确定缓存中删除冗余重复数据后的新业务数据与上一次上报的业务数据不同时,将新业务数据上报到上级服务器;确定缓存中删除冗余重复数据后的新业务数据与上一次上报的业务数据相同时,删除缓存中的新业务数据。
用户设备将新业务数据上报到与其连接的上级服务器后,该上级服务器缓存接收的业务数据,并响应于数据上报指令,获取缓存中的数据。其中,上级服务器为级联的至少一级服务器中的一个服务器,服务器与用户设备或其他用于上报数据的服务器或数据分析服务器连接。与用户设备连接的服务器为最低级服务器,与数据分析设备连接的为最高级服务器。
作为一种可选的实施方式,服务器接收的数据上报指令,为到达上报周期时触发的第三数据上报指令,则服务器采用周期上报方法,按照所述上报周期,进行数据上报。其中,该服务器对应的上报周期不小于与其连接的下级用户设备或下级服务器对应的上报周期,且不大于与其连接的上级服务器对应的上报周期。该服务器对应的上报周期为根据上级服务器或上级数据分析设备的指示确定的上报周期。
具体的,服务器将接收到的下级服务器或下级用户设备发送的业务数据保存到缓存。触发数据上报后,服务器获取缓存中的业务数据,若确定缓存中存在从上一次上报至当前时间接收的新业务数据,上报所述新业务数据。若确定缓存中不存在从上一次上报至当前时间接收的新业务数据,则将当前缓存中业务数据进行上报,或者不上报业务数据,其中,将当前缓存中业务数据进行上报时,可以全部或部分上报,部分上报时可以选择其中的最后一条上报。
上述上报所述新业务数据,并将缓存中所述新业务数据中,除最后一条新业务数据之外的其它新业务数据删除,则服务器每次上报数据后,缓存中的数据仅包括上一次接收的最后一条数据。因此,在确定缓存中不存在从上一次上报至当前时间接收的新业务数据时,将当前缓存中业务数据进行上报,上报的具体为服务器最近一次接收的最后一条数据。
作为一种可选的实施方式,服务器接收的数据上报指令,为接收到一条新业务数据时,触发的第四数据上报指令,则服务器采用逐条上报方法,进行数据上报。
具体的,服务器将接收到的下级服务器或下级用户设备发送的业务数据保存到缓存。触发数据上报后,服务器获取缓存中的业务数据,若确定缓存中存在从上一次上报至当前时间接收的新业务数据,上报所述新业务数据。若确定缓存中不存在从上一次上报至当前时间接收的新业务数据,则将当前缓存中业务数据进行上报,或者不上报业务数据,其中,将当前缓存中业务数据进行上报时,上报的具体为服务器最近一次接收的最后一条数据。
本发明实施例中,服务器在设定时间间隔内,未接收到下级服务器或下级用户设备发送的业务数据时,确定下级用户设备或下级服务器掉线,输出相应的提示信息。
本发明实施例中,各用户设备或服务器对应的上报周期均由数据分析设备根据数据分析需求确定并指示。
以下以分析空调设备业务数据中的温度数据为例,对本发明实施例提供的方法进行说明。通过多级上报空调设备的温度业务数据至数据分析服务器,分析该空调设备应用场景中的温度变化情况。
假设正常情况下,预计用户平均一天操作一台空调设备的次数为6次,则原本该设备一天上述6次业务数据,当通过实时数据对空调设备应用场景内温度数据进行分析时,一般需要每3分钟一次实时数据上报,从而构建数据分析模型,则一天内上报数据变为486次,而每一条数据解析后的数据大概占4kb,以物联网中60W台在线空调设备为例,则平均每天可能达到1112.3GB的数据量,网络带宽至少需要6.18Gbps,同时服务器资源成本也需要增加相应的比例。
预计成本变化如下表1所示:
表1目前多级业务数据上报资源占用情况
服务器资源 | 带宽需求 | 总体资源增长倍数 | |
60W台 | 12CU | 78Mbps | 1倍(原本) |
现有多级上报 | 972CU | 6.18Gbps | 81倍 |
根据本实施例提供的方法,进行多级业务数据上报时,每个空调设备对实时采集的用户数据进行冗余重复数据的过滤,当触发数据上报条件时,将缓存中上一次上报至当前时间缓存中的新业务数据上报到服务器,确保了空调设备在线数据正确,同时减轻数据上报压力。
例如,上述空调设备数据上报是为了获取应用场景内温度变化数据,假设一天内温度变化范围约5度,能检测到的明显变化次数约为10次,而由于用户晚上可能开启空调,在空调恒温的条件下,温度变化跟小,检测到的次数可能更少。以一天变化10次为例,加上用户操作6次及按照固定周期上报1次,每个空调设备上报业务数据次数将由原本的6次变为17次,资源增长约为2.8倍。
服务器接收到空调设备上报的业务数据后,由于不需要重复进行数据解析,改为从缓存中直接获取结果,则估算处理同一条资源的数据所需资源仅为原本的10%,则服务器资源只需增长部分的10%,则为(12×2.8-12)×0.1≈14。另外添加缓存服务资源,而缓存服务资源只需保存60W条缓存记录,大约只需要占用2CU。则整体计算所需资源如下表2所示:
表2本实施例多级业务数据上报资源占用情况
由上述表2可知,相对目前非实时数据上报方法,本实施例提供的多级业务数据上报方法,服务器资源仅增长1.3倍,网络资源仅增长2.8倍,远远小于目前多级数据上报方法对应的服务器资源和网络资源增长倍数81倍,大大减少了实时业务数据上报造成的服务器与网络资源的压力。
本实施例提供的多级业务数据上报方法,通过减少相同数据的上报和处理,实现伪实时数据分析的处理和发送,使数据分析服务器得到与实时数据相近的数据,从而可运算出相近的结果,并大量的减少服务器与网络资源压力。解决了现有数据上报方法存在的数据频繁上报造成的服务器与网络压力过大及数据处理成本大的问题。
以下以通过一级服务器将用户设备的业务数据上报至数据分析平台对应的数据分析设备为例,对本发明提供的多级业务数据上报的方法进行说明。
参照图2,为本发明实施例提供的一种多级业务数据上报的方法的完整流程示意图。如图所示,该方法流程包括:
步骤S201,用户设备响应于数据上报指令,获取缓存中的业务数据;
其中,用户设备实时将采集的业务数据保存到缓存中。
所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据。
步骤S202,用户设备确定缓存中新业务数据是否存在冗余重复数据;
若是,执行步骤S203,否则,执行步骤S204。
步骤S203,用户设备删除缓存中新业务数据中的冗余重复数据;
步骤S204,用户设备将缓存中新业务数据与上一次上报的业务数据比较;
步骤S205,用户设备确定新业务数据与上一次上报的业务数据是否相同;
若是,执行步骤S206,否则,执行步骤S207。
步骤S206,用户设备删除缓存中的新业务数据;
执行步骤S201。
步骤S207,用户设备将缓存中的新业务数据上报给上级服务器;
步骤S208,服务器响应于数据上报指令,获取缓存中的业务数据;
其中,服务器接收到用户设备上报的业务数据时,将业务数据保存到缓存。
所述缓存中包括上一次接收的最后一条业务数据。
步骤S209,服务器确定缓存中是否存在从上一次上报至当前时间接收的新业务数据;
若是,执行步骤S210,否则,执行步骤S211。
步骤S210,上报新业务数据至数据分析设备,并将缓存中所述新业务数据中,除最后一条新业务数据之外的其它新业务数据删除;
执行步骤S212。
步骤S211,将当前缓存中最后一条业务数据上报到数据分析设备;
步骤S212,数据分析设备接收服务器上报的业务数据,并对所述业务数据进行数据分析。
其中,关于上述各步骤的具体实施方式,可以参见前述多级业务数据上报方法的具体实施例,此处不再重述。
实施例2
以上对本发明中一种多级业务数据上报的方法进行说明,以下对执行上述多级业务数据上报方法的设备进行说明。
请参阅图3,本发明实施例提供一种用户设备,包括:
数据获取模块301,用于响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;
数据上报模块302,用于若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器。
可选地,所述数据上报模块还用于:
确定删除冗余重复数据后的新业务数据,与上一次上报的业务数据相同时,删除缓存中的新业务数据。
可选地,所述数据上报模块还用于:
若缓存中所述新业务数据不存在冗余重复数据,与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,将缓存中的新业务数据上报给上级服务器。
可选地,所述数据上报指令,包括:
到达上报周期时触发的第一数据上报指令;或者
采集到一条新业务数据时,触发的第二数据上报指令。
可选地,所述数据上报指令为第一数据上报指令时,所述数据上报模块删除所述冗余重复数据,并与上一次上报的业务数据比较,包括:
按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;
将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
可选地,所述数据上报模块将业务数据,执行业务数据比较时,通过如下方式确定两条业务数据是否相同,包括:
若两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
可选地,所述数据获取模块确定所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期。
实施例3
请参阅图4,本申请实施例中用户设备的另一个实施例包括:
处理器401、存储器402、收发器409以及总线系统411;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,包括如下步骤:
响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;
若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器。
图4是本发明实施例提供的一种用户设备的结构示意图,该设备400可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(英文全称:centralprocessing units,英文简称:CPU)401(例如,一个或一个以上处理器)和存储器402,一个或一个以上存储应用程序404或数据406的存储介质403(例如一个或一个以上海量存储设备)。其中,存储器402和存储介质403可以是短暂存储或持久存储。存储在存储介质403的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对信息处理装置中的一系列指令操作。更进一步地,处理器401可以设置为与存储介质403通信,在设备400上执行存储介质403中的一系列指令操作。
设备400还可以包括一个或一个以上电源410,一个或一个以上有线或无线网络接口407,一个或一个以上输入输出接口408,和/或,一个或一个以上操作系统405,例如Windows Server,Mac OS X,Unix,Linux,FreeBSD等。
可选地,所述处理器还用于:
确定删除冗余重复数据后的新业务数据,与上一次上报的业务数据相同时,删除缓存中的新业务数据。
可选地,所述处理器还用于:
若缓存中所述新业务数据不存在冗余重复数据,与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,将缓存中的新业务数据上报给上级服务器。
可选地,所述数据上报指令,包括:
到达上报周期时触发的第一数据上报指令;或者
采集到一条新业务数据时,触发的第二数据上报指令。
可选地,所述数据上报指令为第一数据上报指令时,所述处理器删除所述冗余重复数据,并与上一次上报的业务数据比较,包括:
按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;
将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
可选地,所述处理器将业务数据,执行业务数据比较时,通过如下方式确定两条业务数据是否相同,包括:
若两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
可选地,所述处理器确定所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期。
实施例4
参照图5,本发明实施例提供一种多级业务数据上报的系统,包括:
如上述实施例3所述的至少一个用户设备;
至少一级级联的服务器,最低级的服务器与所述用户设备连接,最高级服务器与数据分析设备连接,用于缓存接收的业务数据,响应于数据上报指令,获取缓存中的业务数据,若缓存中存在从上一次上报至当前时间接收的新业务数据,上报所述新业务数据,否则,将当前缓存中业务数据进行上报或不上报;
所述数据分析设备,用于接收业务数据,并对所述业务数据进行数据分析。
所述数据上报指令,包括:
到达上报周期时触发的第三数据上报指令;或者
接收到一条新业务数据时,触发的第四数据上报指令。
所述服务器上报所述新业务数据之后,还用于:
将缓存中所述新业务数据中,除最后一条新业务数据之外的其它新业务数据删除。
图5中对于至少一个用户设备,只示例出3个用户设备,对于至少一级级联的服务器,仅示例出1级服务器,且各级服务器仅示例出1个服务器设备,数据分析设备也仅示例出1个。实际系统中,用户设备、服务器、数据分析设备均可能存在多个,在此不再赘述。
上述系统架构仅是对本发明实施例适用系统架构的举例说明,本发明实施例适用的系统架构相比图5所示的系统架构还可以增加其它实体,或减少部分实体。
本实施例中上述各设备的控制方法的具体实施可以参见上述多级业务数据上报方法的实施例,重复之处不再赘述。
本发明实施例还提供一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行上述实施例提供的多级业务数据上报的方法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。
所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘(solidstate disk,SSD))等。
以上对本申请所提供的技术方案进行了详细介绍,本申请中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (11)
1.一种多级业务数据上报的方法,应用于多级业务数据上报系统中的用户设备,其特征在于,包括:
实时采集运行过程中生成的数据,并将采集到的业务数据保存到缓存中;
响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;
若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器;
其中,所述数据上报指令,包括:
到达上报周期时触发的第一数据上报指令;其中,所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期;或者
采集到一条新业务数据时,触发的第二数据上报指令;
其中,所述数据上报指令为第一数据上报指令时,所述删除所述冗余重复数据,并与上一次上报的业务数据比较,包括:
按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;
将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
2.根据权利要求1所述的方法,其特征在于,还包括:
确定删除冗余重复数据后的新业务数据,与上一次上报的业务数据相同时,删除缓存中的新业务数据。
3.根据权利要求1所述的方法,其特征在于,还包括:
若缓存中所述新业务数据不存在冗余重复数据,与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,将缓存中的新业务数据上报给上级服务器。
4.根据权利要求1所述的方法,其特征在于,将业务数据,执行业务数据比较时,通过如下方式确定两条业务数据是否相同,包括:
若两条业务数据的内容完全一致,或者业务数据的变化量未超过设定阈值时,确定所述两条业务数据相同。
5.根据权利要求1所述的方法,其特征在于,确定所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期。
6.一种用户设备,其特征在于,包括:存储器和处理器;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,实现如权利要求1~5任一所述方法的步骤。
7.一种多级业务数据上报的系统,其特征在于,包括:
如权利要求6所述的至少一个用户设备;
至少一级级联的服务器,最低级的服务器与所述用户设备连接,最高级服务器与数据分析设备连接,用于将接收到的下级服务器或下级用户设备发送的业务数据保存到缓存,响应于数据上报指令,获取缓存中的业务数据,若缓存中存在从上一次上报至当前时间接收的新业务数据,上报所述新业务数据,否则,将当前缓存中业务数据进行上报或不上报;
所述数据分析设备,用于接收业务数据,并对所述业务数据进行数据分析。
8.根据权利要求7所述的系统,其特征在于,所述数据上报指令,包括:
到达上报周期时触发的第三数据上报指令;或者
接收到一条新业务数据时,触发的第四数据上报指令。
9.根据权利要求7所述的系统,其特征在于,所述服务器上报所述新业务数据之后,还用于:
将缓存中所述新业务数据中,除最后一条新业务数据之外的其它新业务数据删除。
10.一种用户设备,其特征在于,包括:
数据获取模块,用于实时采集运行过程中生成的数据,并将采集到的业务数据保存到缓存中,响应于数据上报指令,获取缓存中的业务数据,所述缓存中的业务数据包括上一次上报的业务数据,及从上一次上报至当前时间采集的新业务数据;
数据上报模块,用于若缓存中所述新业务数据存在冗余重复数据,删除所述冗余重复数据,并与上一次上报的业务数据比较,确定不完全相同时,删除所述上一次上报的业务数据,并将缓存中的新业务数据上报给上级服务器;
其中,所述数据上报指令,包括:
到达上报周期时触发的第一数据上报指令;其中,所述上报周期为预设固定周期,和/或,根据上级服务器的指示确定的周期;或者
采集到一条新业务数据时,触发的第二数据上报指令;
其中,所述数据上报指令为第一数据上报指令时,所述删除所述冗余重复数据,并与上一次上报的业务数据比较,包括:
按照采集时间从前向后的顺序,逐条确定当前新业务数据,是否与缓存中前一条新业务数据相同,若相同,从缓存中删除所述当前新业务数据;
将缓存中的新业务数据,与上一次上报的业务数据的最后一条比较,若存在至少一条不同的新业务数据,确定与上一次上报的业务数据不完全相同。
11.一种计算机程序介质,其特征在于,其上存储有计算机程序,其特征在于,该程序被中央处理器执行时实现如权利要求1~5任一所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010576639.XA CN111787082B (zh) | 2020-06-22 | 2020-06-22 | 一种多级业务数据上报的方法、设备及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010576639.XA CN111787082B (zh) | 2020-06-22 | 2020-06-22 | 一种多级业务数据上报的方法、设备及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111787082A CN111787082A (zh) | 2020-10-16 |
CN111787082B true CN111787082B (zh) | 2021-11-23 |
Family
ID=72757051
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010576639.XA Active CN111787082B (zh) | 2020-06-22 | 2020-06-22 | 一种多级业务数据上报的方法、设备及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111787082B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112612687A (zh) * | 2020-12-24 | 2021-04-06 | 平安科技(深圳)有限公司 | 用户行为数据的上传方法、装置、设备及介质 |
CN113032413A (zh) * | 2021-03-10 | 2021-06-25 | 北京嘀嘀无限科技发展有限公司 | 数据采样方法、装置、电子设备、存储介质和程序产品 |
CN113155188A (zh) * | 2021-04-15 | 2021-07-23 | 浙江天演维真网络科技股份有限公司 | 一种基于大数据和作物生长环境模型的趋势分析方法 |
CN114389960B (zh) * | 2022-01-04 | 2023-11-28 | 烽火通信科技股份有限公司 | 一种网络业务性能采集上报的方法和系统 |
CN114531495B (zh) * | 2022-02-25 | 2022-10-11 | 北方工业大学 | 一种数据包、数据包生成方法及数据包生成系统 |
CN115002228B (zh) * | 2022-05-31 | 2023-12-26 | 杭州数梦工场科技有限公司 | 服务级联调用方法、装置、电子设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104462456A (zh) * | 2014-12-16 | 2015-03-25 | 芜湖乐锐思信息咨询有限公司 | 基于生活数据处理的大数据系统 |
CN104580424A (zh) * | 2014-12-26 | 2015-04-29 | 珠海格力电器股份有限公司 | 智能家居系统的数据上报方法和装置 |
US9996426B1 (en) * | 2015-06-30 | 2018-06-12 | EMC IP Holding Company LLC | Sparse segment trees for high metadata churn workloads |
CN108449404A (zh) * | 2018-03-13 | 2018-08-24 | 深圳市中科智联科技有限公司 | 上报终端信息方法、终端、集中器及计算机可读存储介质 |
CN110618978A (zh) * | 2019-09-20 | 2019-12-27 | 南京信同诚信息技术有限公司 | 一种云系统集成和存储系统及方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8515909B2 (en) * | 2008-04-29 | 2013-08-20 | International Business Machines Corporation | Enhanced method and system for assuring integrity of deduplicated data |
CN103902663A (zh) * | 2014-03-10 | 2014-07-02 | 联想(北京)有限公司 | 文件同步方法和装置 |
CN105260285A (zh) * | 2015-10-21 | 2016-01-20 | 深圳市共济科技有限公司 | 一种数据中心数据采集并上传的方法及系统 |
CN106709013A (zh) * | 2016-12-26 | 2017-05-24 | 深圳市捷顺科技实业股份有限公司 | 数据处理方法及对应装置、数据交互方法及对应装置 |
US10360671B2 (en) * | 2017-07-11 | 2019-07-23 | Kla-Tencor Corporation | Tool health monitoring and matching |
US10795780B2 (en) * | 2018-06-29 | 2020-10-06 | International Business Machines Corporation | Data breach source and timeline analysis |
-
2020
- 2020-06-22 CN CN202010576639.XA patent/CN111787082B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104462456A (zh) * | 2014-12-16 | 2015-03-25 | 芜湖乐锐思信息咨询有限公司 | 基于生活数据处理的大数据系统 |
CN104580424A (zh) * | 2014-12-26 | 2015-04-29 | 珠海格力电器股份有限公司 | 智能家居系统的数据上报方法和装置 |
US9996426B1 (en) * | 2015-06-30 | 2018-06-12 | EMC IP Holding Company LLC | Sparse segment trees for high metadata churn workloads |
CN108449404A (zh) * | 2018-03-13 | 2018-08-24 | 深圳市中科智联科技有限公司 | 上报终端信息方法、终端、集中器及计算机可读存储介质 |
CN110618978A (zh) * | 2019-09-20 | 2019-12-27 | 南京信同诚信息技术有限公司 | 一种云系统集成和存储系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111787082A (zh) | 2020-10-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111787082B (zh) | 一种多级业务数据上报的方法、设备及系统 | |
CN108683720B (zh) | 一种容器集群服务配置方法及装置 | |
CN109947668B (zh) | 存储数据的方法和装置 | |
CA2896865C (en) | Method and system for using a recursive event listener on a node in hierarchical data structure | |
CN107391633A (zh) | 数据库集群自动优化处理方法、装置及服务器 | |
CN105635279A (zh) | 一种分布式监控系统及数据采集方法 | |
CN107656807B (zh) | 一种虚拟资源的自动弹性伸缩方法及装置 | |
CN111124819A (zh) | 全链路监控的方法和装置 | |
CN111600952A (zh) | 场景推送方法、执行方法、装置、终端、服务器和系统 | |
CN111562889B (zh) | 数据处理方法、装置、系统及存储介质 | |
CN111064591B (zh) | 数据汇聚方法、装置、设备、存储介质和系统 | |
CN108924203B (zh) | 数据副本自适应分布方法、分布式计算系统及相关设备 | |
CN112486634A (zh) | 一种实现容器云平台整体监控的方法 | |
CN111224807A (zh) | 分布式日志处理方法、装置、设备及计算机存储介质 | |
US10235062B1 (en) | Selection of computer resources to perform file operations in a power-efficient manner | |
CN111953567B (zh) | 一种配置多集群管理软件参数的方法、系统、设备及介质 | |
CN113419938A (zh) | 用户并发访问的控制方法、装置及设备 | |
CN111291021A (zh) | 一种数据库管理方法、装置、电子设备及存储介质 | |
CN111400045A (zh) | 一种负载均衡方法及装置 | |
CN116048846A (zh) | 数据传输方法、装置、设备和存储介质 | |
CN113448747B (zh) | 数据传输方法、装置、计算机设备和存储介质 | |
CN111984723A (zh) | 数据同步方法、装置及终端设备 | |
CN104483880A (zh) | 一种数据采集方法及数据采集服务器 | |
CN114706893A (zh) | 故障检测方法、装置、设备及存储介质 | |
CN109918366B (zh) | 一种基于大数据的数据安全处理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |