CN110413607A - 一种分布式计数方法、服务器及系统 - Google Patents
一种分布式计数方法、服务器及系统 Download PDFInfo
- Publication number
- CN110413607A CN110413607A CN201810404757.5A CN201810404757A CN110413607A CN 110413607 A CN110413607 A CN 110413607A CN 201810404757 A CN201810404757 A CN 201810404757A CN 110413607 A CN110413607 A CN 110413607A
- Authority
- CN
- China
- Prior art keywords
- data
- real time
- count results
- measured
- testing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 238000001514 detection method Methods 0.000 claims abstract description 13
- 238000012544 monitoring process Methods 0.000 claims description 70
- 238000004590 computer program Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 3
- 230000008901 benefit Effects 0.000 abstract description 7
- 230000000694 effects Effects 0.000 abstract description 6
- 230000006870 function Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种分布式计数方法、服务器及系统，涉及数据统计技术领域，该方法包括以下步骤：选定待测数据源作为检测目标；获取待测数据源实时数据并进行分类；对分类后的待测数据源实时数据进行分类存储；分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算；将多个数量计数结果根据数据类型进行对应存储；根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。本发明具有实时统计的优势，对数据进行分类存储以及分类统计，获得高效的统计效果。
Description
技术领域
本发明涉及数据统计技术领域，具体涉及一种分布式计数方法、服务器及系统。
背景技术
在对直播间观看用户的监测中，为了识别某一个用户是否是非法的，即是否为真实的用户，而非机器人，通常需要进行用户发布数据进行多维度的数据计算，对用户发送的不同类型的数据进行统计，并根据统计结果组合判断用户的合法性。
而传统的监测方法，多为对离线数据进行统计计算，但由于根据离线数据的统计计算对监测的结果判断存在一定的延时性，且当离线数据较大时，统计计算的效率也较为低下；
因此急需一种针对用户发布数据进行实时的高效统计方法。
发明内容
针对现有技术中存在的缺陷，本发明的目的在于提供一种分布式计数方法、服务器及系统，具有实时统计的优势，对数据进行分类存储以及分类统计，获得高效的统计效果。
为达到以上目的，本发明采取的技术方案是：
一种分布式计数方法，该方法包括以下步骤：
选定待测数据源作为检测目标；
获取待测数据源实时数据并进行分类；
对分类后的待测数据源实时数据进行分类存储；
分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算；
将多个数量计数结果根据数据类型进行对应存储；
根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
在上述技术方案的基础上，所述数量更新情况进行实时检测时，具体包括以下步骤：创建一用于监测数量计数结果的监测参数，所述监测参数的数值为一预设的默认值，当获得用于进行数量更新的数量计数结果后，所述监测参数的数值发生改变，待数据更新工作完成后，所述监测参数的数值恢复为默认值。
在上述技术方案的基础上，所述获取待测数据源实时数据并进行分类的步骤具体包括以下步骤：
根据各所述待测数据源实时数据的数据类型建立数据集合表格；
各所述待测数据源实时数据根据数据类型存储于所述数据集合表格中。
在上述技术方案的基础上，所述分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算具体包括以下步骤：
创建用于统计不同类型数据数量的计算集合，所述计算集合内包含多个数据统计公式，各所述数据统计公式分别对应一种数据类型；
所述计算集合中的各所述数据统计公式适用的数据类型与所述数据集合表格中数据类型相对应。
一种分布式计数方法，其用于在直播间统计用户访问数据，该方法包括以下步骤：
选定待测用户作为检测目标；
获取待测用户实时数据并进行分类；
对分类后的待测用户实时数据进行分类存储；
分别根据分类后的待测用户实时数据的数据类型进行对应的数量计算；
将多个数量计数结果根据数据类型进行对应存储；
根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
一种服务器，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述分布式计数方法的步骤。
一种分布式计数系统，该系统包括：待测数据源监测单元，其用于选定待测数据源作为检测目标，获取待测数据源实时数据并进行分类；
待测数据源实时数据存储单元，其用于对分类后的待测数据源实时数据进行分类存储；
待测数据源实时数据统计单元，其用于分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算；
计数结果存储单元，其用于将多个数量计数结果根据数据类型进行对应存储；
计数结果更新单元，根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
在上述技术方案的基础上，所述计数结果更新单元内包括更新监测单元，其内置用于监测数量计数结果的监测参数，所述监测参数的数值为一预设的默认值，当获得用于进行数量更新的数量计数结果后，所述监测参数的数值发生改变，待数据更新工作完成后，所述监测参数的数值恢复为默认值。
在上述技术方案的基础上，所述待测数据源监测单元内置有根据各所述待测数据源实时数据的数据类型建立的数据集合表格，各所述待测数据源实时数据根据数据类型存储于所述各所述待测数据源实时数据中。
一种分布式计数系统，其用于在直播间统计用户访问数据，该系统包括：待测用户监测单元，其用于选定待测用户作为检测目标，获取待测用户实时数据并进行分类；
待测用户实时数据存储单元，其用于对分类后的待测用户实时数据进行分类存储；
待测用户实时数据统计单元，其用于分别根据分类后的待测用户实时数据的数据类型进行对应的数量计算；
计数结果存储单元，其用于将多个数量计数结果根据数据类型进行对应存储；
计数结果更新单元，根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
与现有技术相比，本发明的优点在于：
(1)本发明获取待测数据源实时数据并进行分类，并对分类后的待测数据源实时数据进行分类存储，后期进行针对性的统计，提高统计效率；
与现有技术相比，本发明具有实时统计的优势，对数据进行分布式统计，对数据进行分类存储以及分类统计，从而在保证统计准确度的前提下，获得高效的统计效果。
(2)本发明创建一用于监测数量计数结果的监测参数，监测参数的数值为一预设的默认值，当获得用于进行数量更新的数量计数结果后，监测参数的数值发生改变，待数据更新工作完成后，监测参数的数值恢复为默认值；
与现有技术相比，本发明能够从判断监测参数的数值进而来对数据更新工作的完成情况进行监测。
附图说明
图1为本发明实施例中分布式计数方法的流程图；
图2为本发明实施例中分布式计数系统的结构框图。
具体实施方式
以下结合附图对本发明的实施例作进一步详细说明。
参见图1所示，本发明实施例提供一种分布式计数方法，包括以下步骤：
S1、选定待测数据源作为检测目标；
S2、获取待测数据源实时数据并进行分类；
S3、对分类后的待测数据源实时数据进行分类存储；
S4、分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算；
S5、将多个数量计数结果根据数据类型进行对应存储；
S6、根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测；
本发明中，在需要对待测数据源发布数据的情况进行统计时，获取待测数据源实时数据并进行分类，并对分类后的待测数据源实时数据进行分类存储，由于每种不同类型的数据的统计方式存在一定差异，因此将待测数据源实时数据进行分类，便于后期存储从而避免出现混乱，而后期进行针对性的统计，即每种类型的数据均采取与其最合适的统计公式进行统计，以提高统计效率；
本发明具有实时统计的优势，对数据进行分布式统计，对数据进行分类存储以及分类统计，从而在保证统计准确度的前提下，获得高效的统计效果。
需要说明的是，获取待测数据源实时数据时，可采用数据连接接口进行数据采集的方式，而该接口获取待测数据源获取的数据，接口形式为dubbo接口类型。以数据源id信息与数据具体内容为参数；
而对待测数据源实时数据进行存储时，存储方式主要以消息中间件kafka、MQ消息队列等或者是以MySQL和HBase为主的数据库存储设备，实现多线程消费，并将实时获取到的数据信息，通过rpc接口调用形式交给存储组件。
本实施例中，数量更新情况进行实时检测时，具体包括以下步骤：创建一用于监测数量计数结果的监测参数，监测参数的数值为一预设的默认值，当获得用于进行数量更新的数量计数结果后，监测参数的数值发生改变，待数据更新工作完成后，监测参数的数值恢复为默认值；
监测参数能够监测数量技术结果的变化，由于监测参数自身存在一预设的默认值，而监测参数的数值会根据数据更新工作的完成情况进行变化，当数据更新工作完成后，监测参数的数值恢复为默认值，采用此机制，能够从判断监测参数的数值进而来对数据更新工作的完成情况进行监测；
而当获得用于进行数量更新的数量计数结果后，监测参数的数值发生改变，具体改变方式可以是监测参数的数值与数量计数结果相同或其他改变方式。
需要说明的是，数量计数结果在实时系统中不是一成不变的，需要实时根据策略进行调整，计算规则也需要快速的变化，如果每次的维度计算的更改都需要，都需要进行重启，本发明zookeeper的监听策略实现了数量计数结果的实时更新，在zookeeper的指定的目录下创建临时节点，即创建监测参数，默认值为-1，并启动监听器，监听监测参数是否有变化，当监测参数的数据变化时，获取该值，根据该值，获取更新的数量计数结果，并进行初始化操作，并将新的维数量计数结果加入到数量计数结果集合中，实现实时生效，并更新zookeeper下的监测参数为初始值-1，默认所有的节点均更新成功。
本实施例中，获取待测数据源实时数据并进行分类的步骤具体包括以下步骤：
根据各待测数据源实时数据的数据类型建立数据集合表格；
各待测数据源实时数据根据数据类型存储于数据集合表格中；
数据集合表格用于统计待测数据源实时数据的数据类型，进而根据数据类型对待测数据源实时数据进行存储；
而后在对分类后的待测数据源实时数据进行分类存储步骤中，将各数据类型的待测数据源实时数据进分类存储，避免在后续数据统计时，不同数据类型的待测数据源实时数据相互干扰。
需要说明的是，数据集合表格可以是初始化维度计算数据信息集合，获取所有启用的维度计算数据，以维度计算数据对应的数据源id为key，以该数据源下所有的启动的维度计算数据组成的List列表为value，组成一个Map结构，当dubbo接口消息调用时，可以快速的找到需要计算的类型。
本实施例中，分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算具体包括以下步骤：
创建用于统计不同类型数据数量的计算集合，计算集合内包含多个数据统计公式，各数据统计公式分别对应一种数据类型；
计算集合中的各数据统计公式适用的数据类型与数据集合表格中数据类型相对应；
由于不同类型的数据在进行数量统计时，需要用到不同的数据统计公式，因此需要创建用于统计不同类型数据数量的计算集合，计算集合内包含多个数据统计公式，各数据统计公式分别对应一种数据类型，针对不同的数据类型利用相应的数据统计公式。
需要说明的是，数据类型可以是count、sum、average、distinct(count)等类型；
而在完成数量统计后，数量计数结果可利用redis存储技术进行存储，实现高效的存储，主要依靠redis的高性能计数，为了实现更高性能的分布式存储特性，将本地缓存计算与redis incr计算相结合，实现更高的存储性能；
例如，针对uid为123的用户，需要统计进1个小时的弹幕数据，目前有3台实时数据计算存储组件，若3台同时调用redis的incr命令实现计数，因redis内部以单进程实现增量计数，所以计算增量结果完全没有问题，但在大并发量下，如以玩高峰时期上百万、千万级别的计数需求，redis并发性能上有很大的影响；
本发明实现了基于定时器与本地AtomicLong原子计数实现本地一级计数缓存，同时也是本文的一个发明点。例如3台机器中针对用户uid为123的用户，在1Min内A机器计数uid到100，B机器计数到200，C机器计数到150，等到1分钟完毕，定时器触发reids incrby命令，将各个机器计数数据刷入到redis中,此时reids中uid为123的用户存储数据为450.而此时redis的command数量为3次，远远小于之前的450次的incr调用，大大减轻了redis的并发请求量。
一种分布式计数方法，其用于在直播间统计用户访问数据，该方法包括以下步骤：
选定待测用户作为检测目标；
获取待测用户实时数据并进行分类；
对分类后的待测用户实时数据进行分类存储；
分别根据分类后的待测用户实时数据的数据类型进行对应的数量计算；
将多个数量计数结果根据数据类型进行对应存储；
根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测；
在需要对直播间的用户进行识别时，为了识别某一个用户是否是非法的，需要通过多维度的数据计算，根据计算结果组合判断用户的合法性；
例如判断一个用户是否是机器人，需要根据该用户在短时间内发送弹幕的条数是否大于1000、判断该用户是否有行为打点数据、判断该用户的是否有播放器打点等多个维度组合判断；
在非实时的场景中，可以通过离线的数据很方便的进行统计计算，但是离线识别的结果并不能当时马上生效，这样就给一批非法用户有了可乘之机，利用这段时间获取非法的利益；
因此本发明具有实时统计的优势，对数据进行分布式统计，对数据进行分类存储以及分类统计，从而在保证统计准确度的前提下，获得高效的统计效果。
一种服务器，其上存储有计算机程序，计算机程序被处理器执行时实现上述分布式计数方法中任一项方法的步骤。
一种分布式计数系统，该系统包括：待测数据源监测单元，其用于选定待测数据源作为检测目标，获取待测数据源实时数据并进行分类；
待测数据源实时数据存储单元，其用于对分类后的待测数据源实时数据进行分类存储；
待测数据源实时数据统计单元，其用于分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算；
计数结果存储单元，其用于将多个数量计数结果根据数据类型进行对应存储；
计数结果更新单元，根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
本发明中，在需要对待测数据源发布数据的情况进行统计时，获取待测数据源实时数据并进行分类，并对分类后的待测数据源实时数据进行分类存储，由于每种不同类型的数据的统计方式存在一定差异，因此将待测数据源实时数据进行分类，便于后期存储从而避免出现混乱，而后期进行针对性的统计，即每种类型的数据均采取与其最合适的统计公式进行统计，以提高统计效率；
本发明具有实时统计的优势，对数据进行分布式统计，对数据进行分类存储以及分类统计，从而在保证统计准确度的前提下，获得高效的统计效果。
需要说明的是，获取待测数据源实时数据时，可采用数据连接接口进行数据采集的方式，而该接口获取待测数据源获取的数据，接口形式为dubbo接口类型。以数据源id信息与数据具体内容为参数；
而对待测数据源实时数据进行存储时，存储方式主要以消息中间件kafka、MQ消息队列等或者是以MySQL和HBase为主的数据库存储设备，实现多线程消费，并将实时获取到的数据信息，通过rpc接口调用形式交给存储组件。
本实施例中，计数结果更新单元内包括更新监测单元，其内置用于监测数量计数结果的监测参数，监测参数的数值为一预设的默认值，当获得用于进行数量更新的数量计数结果后，监测参数的数值发生改变，待数据更新工作完成后，监测参数的数值恢复为默认值；
监测参数能够监测数量技术结果的变化，由于监测参数自身存在一预设的默认值，而监测参数的数值会根据数据更新工作的完成情况进行变化，当数据更新工作完成后，监测参数的数值恢复为默认值，采用此机制，能够从判断监测参数的数值进而来对数据更新工作的完成情况进行监测；
而当获得用于进行数量更新的数量计数结果后，监测参数的数值发生改变，具体改变方式可以是监测参数的数值与数量计数结果相同或其他改变方式。
本实施例中，待测数据源监测单元内置有根据各待测数据源实时数据的数据类型建立的数据集合表格，各待测数据源实时数据根据数据类型存储于各待测数据源实时数据中。
参见图2所示，一种分布式计数系统，其用于在直播间统计用户访问数据，该系统包括：待测用户监测单元，其用于选定待测用户作为检测目标，获取待测用户实时数据并进行分类；
待测用户实时数据存储单元，其用于对分类后的待测用户实时数据进行分类存储；
待测用户实时数据统计单元，其用于分别根据分类后的待测用户实时数据的数据类型进行对应的数量计算；
计数结果存储单元，其用于将多个数量计数结果根据数据类型进行对应存储；
计数结果更新单元，根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
需要说明的是：上述实施例提供的系统在实现分布式计数系统操作时，仅以上述各功能模块的划分进行举例说明，实际应用中，可根据需要而将上述功能分配由不同功能模块完成，即将系统的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。
本发明不局限于上述实施方式，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围之内。
本说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。
Claims (10)
1.一种分布式计数方法，其特征在于，该方法包括以下步骤：
选定待测数据源作为检测目标；
获取待测数据源实时数据并进行分类；
对分类后的待测数据源实时数据进行分类存储；
分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算；
将多个数量计数结果根据数据类型进行对应存储；
根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
2.如权利要求1所述的分布式计数方法，其特征在于，所述数量更新情况进行实时检测时，具体包括以下步骤：创建一用于监测数量计数结果的监测参数，所述监测参数的数值为一预设的默认值，当获得用于进行数量更新的数量计数结果后，所述监测参数的数值发生改变，待数据更新工作完成后，所述监测参数的数值恢复为默认值。
3.如权利要求1所述的分布式计数方法，其特征在于，所述获取待测数据源实时数据并进行分类的步骤具体包括以下步骤：
根据各所述待测数据源实时数据的数据类型建立数据集合表格；
各所述待测数据源实时数据根据数据类型存储于所述数据集合表格中。
4.如权利要求1所述的分布式计数方法，其特征在于：所述分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算具体包括以下步骤：
创建用于统计不同类型数据数量的计算集合，所述计算集合内包含多个数据统计公式，各所述数据统计公式分别对应一种数据类型；
所述计算集合中的各所述数据统计公式适用的数据类型与所述数据集合表格中数据类型相对应。
5.一种分布式计数方法，其特征在于，其用于在直播间统计用户访问数据，该方法包括以下步骤：
选定待测用户作为检测目标；
获取待测用户实时数据并进行分类；
对分类后的待测用户实时数据进行分类存储；
分别根据分类后的待测用户实时数据的数据类型进行对应的数量计算；
将多个数量计数结果根据数据类型进行对应存储；
根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
6.一种服务器，其上存储有计算机程序，其特征在于：所述计算机程序被处理器执行时实现上述权利要求1至5中任一项所述方法的步骤。
7.一种分布式计数系统，其特征在于，该系统包括：待测数据源监测单元，其用于选定待测数据源作为检测目标，获取待测数据源实时数据并进行分类；
待测数据源实时数据存储单元，其用于对分类后的待测数据源实时数据进行分类存储；
待测数据源实时数据统计单元，其用于分别根据分类后的待测数据源实时数据的数据类型进行对应的数量计算；
计数结果存储单元，其用于将多个数量计数结果根据数据类型进行对应存储；
计数结果更新单元，根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
8.如权利要求7所述的分布式计数系统，其特征在于：所述计数结果更新单元内包括更新监测单元，其内置用于监测数量计数结果的监测参数，所述监测参数的数值为一预设的默认值，当获得用于进行数量更新的数量计数结果后，所述监测参数的数值发生改变，待数据更新工作完成后，所述监测参数的数值恢复为默认值。
9.如权利要求7所述的分布式计数系统，其特征在于：所述待测数据源监测单元内置有根据各所述待测数据源实时数据的数据类型建立的数据集合表格，各所述待测数据源实时数据根据数据类型存储于所述各所述待测数据源实时数据中。
10.一种分布式计数系统，其特征在于，其用于在直播间统计用户访问数据，该系统包括：待测用户监测单元，其用于选定待测用户作为检测目标，获取待测用户实时数据并进行分类；
待测用户实时数据存储单元，其用于对分类后的待测用户实时数据进行分类存储；
待测用户实时数据统计单元，其用于分别根据分类后的待测用户实时数据的数据类型进行对应的数量计算；
计数结果存储单元，其用于将多个数量计数结果根据数据类型进行对应存储；
计数结果更新单元，根据数据类型将数量计数结果进行数量更新，并对数量更新情况进行实时检测。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810404757.5A CN110413607B (zh) | 2018-04-28 | 2018-04-28 | 一种分布式计数方法、服务器及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810404757.5A CN110413607B (zh) | 2018-04-28 | 2018-04-28 | 一种分布式计数方法、服务器及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110413607A true CN110413607A (zh) | 2019-11-05 |
| CN110413607B CN110413607B (zh) | 2022-04-08 |
Family
ID=68357410
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810404757.5A Active CN110413607B (zh) | 2018-04-28 | 2018-04-28 | 一种分布式计数方法、服务器及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110413607B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111625568A (zh) * | 2020-05-22 | 2020-09-04 | 珠海玖零科技有限公司 | 一种大数据统计归集算法 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6704782B1 (en) * | 1999-12-09 | 2004-03-09 | International Business Machines Corporation | System and methods for real time progress monitoring in a computer network |
| CN1673972A (zh) * | 2004-08-04 | 2005-09-28 | 上海宝信软件股份有限公司 | 数据库表更新的动态监控系统及方法 |
| US20060159027A1 (en) * | 2005-01-18 | 2006-07-20 | Aspect Communications Corporation | Method and system for updating real-time data between intervals |
| CN104283901A (zh) * | 2013-07-01 | 2015-01-14 | 亿览在线网络技术（北京）有限公司 | 一种分布式直播后台服务系统及其方法 |
| CN104579823A (zh) * | 2014-12-12 | 2015-04-29 | 国家电网公司 | 一种基于大数据流的网络流量异常检测系统及方法 |
| CN105281778A (zh) * | 2015-10-16 | 2016-01-27 | 上海通创信息技术有限公司 | 监控数据自适应压缩方法及系统 |
| CN105791326A (zh) * | 2016-05-25 | 2016-07-20 | 武汉斗鱼网络科技有限公司 | 一种基于用户页面行为的白名单生成系统及方法 |
| CN106060057A (zh) * | 2016-06-17 | 2016-10-26 | 武汉斗鱼网络科技有限公司 | 视频直播网站基于用户弹幕行为生成白名单的系统及方法 |
| CN106067991A (zh) * | 2016-05-25 | 2016-11-02 | 武汉斗鱼网络科技有限公司 | 一种基于用户页面行为轨迹的白名单生成系统及方法 |
| CN107302469A (zh) * | 2016-04-14 | 2017-10-27 | 北京京东尚科信息技术有限公司 | 针对分布式服务集群系统数据更新的实时监控装置及方法 |
-
2018
- 2018-04-28 CN CN201810404757.5A patent/CN110413607B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6704782B1 (en) * | 1999-12-09 | 2004-03-09 | International Business Machines Corporation | System and methods for real time progress monitoring in a computer network |
| CN1673972A (zh) * | 2004-08-04 | 2005-09-28 | 上海宝信软件股份有限公司 | 数据库表更新的动态监控系统及方法 |
| US20060159027A1 (en) * | 2005-01-18 | 2006-07-20 | Aspect Communications Corporation | Method and system for updating real-time data between intervals |
| CN104283901A (zh) * | 2013-07-01 | 2015-01-14 | 亿览在线网络技术（北京）有限公司 | 一种分布式直播后台服务系统及其方法 |
| CN104579823A (zh) * | 2014-12-12 | 2015-04-29 | 国家电网公司 | 一种基于大数据流的网络流量异常检测系统及方法 |
| CN105281778A (zh) * | 2015-10-16 | 2016-01-27 | 上海通创信息技术有限公司 | 监控数据自适应压缩方法及系统 |
| CN107302469A (zh) * | 2016-04-14 | 2017-10-27 | 北京京东尚科信息技术有限公司 | 针对分布式服务集群系统数据更新的实时监控装置及方法 |
| CN105791326A (zh) * | 2016-05-25 | 2016-07-20 | 武汉斗鱼网络科技有限公司 | 一种基于用户页面行为的白名单生成系统及方法 |
| CN106067991A (zh) * | 2016-05-25 | 2016-11-02 | 武汉斗鱼网络科技有限公司 | 一种基于用户页面行为轨迹的白名单生成系统及方法 |
| CN106060057A (zh) * | 2016-06-17 | 2016-10-26 | 武汉斗鱼网络科技有限公司 | 视频直播网站基于用户弹幕行为生成白名单的系统及方法 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111625568A (zh) * | 2020-05-22 | 2020-09-04 | 珠海玖零科技有限公司 | 一种大数据统计归集算法 |
| CN111625568B (zh) * | 2020-05-22 | 2022-04-01 | 广东玖零科技有限公司 | 一种大数据统计归集算法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110413607B (zh) | 2022-04-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106020715B (zh) | 存储池容量管理 | |
| CN103593376B (zh) | 一种采集用户行为数据的方法及装置 | |
| CN103838668B (zh) | 关联能量消耗与虚拟机 | |
| CN104426713B (zh) | 网络站点访问效果数据的监测方法和装置 | |
| CN104156296B (zh) | 智能监控大规模数据中心集群计算节点的系统和方法 | |
| CN101505243B (zh) | 一种Web应用性能异常侦测方法 | |
| CN108833184A (zh) | 服务故障定位方法、装置、计算机设备及存储介质 | |
| US8270410B2 (en) | Sampling techniques | |
| CN109254901B (zh) | 一种指标监测方法及系统 | |
| CN107851105A (zh) | 具有副本位置选择的分布式存储系统 | |
| CN107656851A (zh) | 一种基于部件能耗模型的云服务器能耗测算方法及系统 | |
| CN104182278B (zh) | 一种判定计算机硬件资源繁忙程度的方法和装置 | |
| CN104035926A (zh) | 一种互联网信息的投放和系统 | |
| CN107533511A (zh) | 使用假想高速缓存的实时高速缓存行为预报 | |
| CN106874316A (zh) | 一种用户汇总数据的展示方法、装置及服务器 | |
| Katsipoulakis et al. | Concept-driven load shedding: Reducing size and error of voluminous and variable data streams | |
| CN110019386A (zh) | 一种流数据处理方法及设备 | |
| CN107220121A (zh) | 一种numa架构下沙箱环境测试方法及其系统 | |
| CN103390067B (zh) | 用于互联网实体分析的数据处理方法和装置 | |
| CN108733839A (zh) | 一种海量数据的统计方法及装置 | |
| CN111400356A (zh) | 数据查询方法、装置及设备 | |
| CN109635192A (zh) | 面向微服务的海量资讯热度排行更新方法及平台 | |
| CN108153758A (zh) | 一种数据累计方法、装置及电子设备 | |
| Zheng et al. | Rethinking fine-grained measurement from software-defined perspective: A survey | |
| US8271643B2 (en) | Method for building enterprise scalability models from production data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20231218 Address after: No. 546, Luoyu Road, Hongshan District, Wuhan, Hubei Province, 430000 Patentee after: HUBEI CENTRAL CHINA TECHNOLOGY DEVELOPMENT OF ELECTRIC POWER Co.,Ltd. Address before: 430000 East Lake Development Zone, Wuhan City, Hubei Province, No. 1 Software Park East Road 4.1 Phase B1 Building 11 Building Patentee before: WUHAN DOUYU NETWORK TECHNOLOGY Co.,Ltd. |