CN111694854B - 一种区域进出监控方法、装置、电子设备及存储介质 - Google Patents
一种区域进出监控方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN111694854B CN111694854B CN202010506889.6A CN202010506889A CN111694854B CN 111694854 B CN111694854 B CN 111694854B CN 202010506889 A CN202010506889 A CN 202010506889A CN 111694854 B CN111694854 B CN 111694854B
- Authority
- CN
- China
- Prior art keywords
- monitoring
- monitoring object
- current
- mysql
- monitoring data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 477
- 238000000034 method Methods 0.000 title claims abstract description 61
- 238000012806 monitoring device Methods 0.000 claims abstract description 9
- 230000015654 memory Effects 0.000 claims description 22
- 238000012546 transfer Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 3
- 238000010926 purge Methods 0.000 claims description 2
- 230000004044 response Effects 0.000 abstract description 11
- 238000004364 calculation method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 5
- 239000000284 extract Substances 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011010 flushing procedure Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Alarm Systems (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请公开了一种区域进出监控方法、装置、电子设备及存储介质,涉及大数据技术领域。具体方案为:若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控;若在当前时刻上监控到至少一个监控对象,则将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻;将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。本申请实施例能够针对大量的监控数据进行存储,不仅可以保证区域进出监控服务的计算响应能力,还可以保持监控数据的完整性,从而可以提升整个监控服务系统的性能。
Description
技术领域
本申请涉及计算机技术领域,进一步涉及大数据技术,尤其是一种区域进出监控方法、装置、电子设备及存储介质。
背景技术
安防系统有大量对于区域流量监控的需求,通常电子设备先获取各个监控对象的唯一标识,然后按照具体的策略判断出各个监控对象的进出入状态,再对各个监控对象的进出入状态进行存储。由于电子设备通常采用实时监控的策略,会产生大量的监控数据,因此电子设备需要大量的监控数据进行存储。目前对于上述场景数据存储的方法包括:(1)使用分布式文件存储系统,如分布式文件系统HDFS、搜索服务器ES、基于分布式文件存储的数据库MongoDB等;(2)使用传统的数据库管理系统DBMS,如关系型数据库管理系统MySQL、关系数据库Oracle等。
而在现有技术中,只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储。也就是说,假设MySQL的存储容量为100G,那么只能将100G的监控数据存储至MySQL中,对于超过100G的监控数据则无法对其进行存储。
发明内容
本申请提供了一种区域进出监控方法、装置、电子设备以及存储介质,能够针对大量的监控数据进行存储,不仅可以保证区域进出监控服务的计算响应能力,还可以保持监控数据的完整性,从而可以提升整个监控服务系统的性能。
第一方面,本申请提供了一种区域进出监控方法,所述方法包括:
若当前时刻不为当前时间段的最后一个时刻,则在所述当前时刻上对进出预定区域的预定类型的监控对象进行监控;
若在所述当前时刻上监控到至少一个监控对象,则将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为所述当前时刻,重复执行上述操作,直到所述当前时刻为所述当前时间段的最后一个时刻;
将所述MySQL中存储的监控数据分别转存至HDFS和ES中,并将所述MySQL中存储的监控数据进行清除。
第二方面,本申请提供了一种区域进出监控装置,所述装置包括:监控模块、第一存储模块和第二存储模块;其中,
所述监控模块,用于若当前时刻不为当前时间段的最后一个时刻,则在所述当前时刻上对进出预定区域的预定类型的监控对象进行监控;
所述第一存储模块,用于若在所述当前时刻上监控到至少一个监控对象,则将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为所述当前时刻,重复执行上述操作,直到所述当前时刻为所述当前时间段的最后一个时刻;
所述第二存储模块,用于将所述MySQL中存储的监控数据分别转存至HDFS和ES中,并将所述MySQL中存储的监控数据进行清除。
第三方面,本申请实施例提供了一种电子设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本申请任意实施例所述的区域进出监控方法。
第四方面,本申请实施例提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现本申请任意实施例所述的区域进出监控方法。
根据本申请的技术解决了现有技术中只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储的技术问题,本申请提供的技术方案,能够针对大量的监控数据进行存储,不仅可以保证区域进出监控服务的计算响应能力,还可以保持监控数据的完整性,从而可以提升整个监控服务系统的性能。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本申请的限定。其中:
图1是本申请实施例一提供的区域进出监控方法的流程示意图;
图2是本申请实施例二提供的区域进出监控方法的流程示意图;
图3是本申请实施例三提供的区域进出监控方法的流程示意图;
图4是本申请实施例四提供的区域进出监控装置的结构示意图;
图5是本申请实施例四提供的第一存储模块的结构示意图;
图6是用来实现本申请实施例的区域进出监控方法的电子设备的框图。
具体实施方式
以下结合附图对本申请的示范性实施例做出说明,其中包括本申请实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本申请的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
实施例一
图1是本申请实施例一提供的区域进出监控方法的流程示意图,该方法可以由区域进出监控装置或者电子设备来执行,该装置、电子设备或者电子设备可以由软件和/或硬件的方式实现,该装置或者电子设备可以集成在任何具有网络通信功能的智能设备中。如图1所示,区域进出监控方法可以包括以下步骤:
S101、若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控。
在本申请的具体实施例中,若当前时刻不为当前时间段的最后一个时刻,则电子设备可以在当前时刻上对进出预定区域的预定类型的监控对象进行监控。具体地,预定类型可以是车辆、也可以是其他类型的监控对象,在此不进行限定。本申请可以将预定长度的时间划分为一个时间段,例如,将24小时(即一天)划分为一个时间段,然后在每一个时间段内对预定类型的监控对象进行监控。
S102、若在当前时刻上监控到至少一个监控对象,则将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻。
在本申请的具体实施例中,若在当前时刻上监控到至少一个监控对象,则将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻。例如,假设当前时间段的起始时间为00:00:00,终止时间为:24:00:00;假设当前时刻为00:00:01,由于当前时刻不为当前时间段的最后一个时刻,则在00:00:01上对进出预定区域的预定类型的监控对象进行监控;若在00:00:01上监控到至少一个监控对象,则将各个监控对象对应的监控数据存储至MySQL中;若在00:00:01上未监控到任何监控对象,则不进行任何操作;接着将00:00:02作为当前时刻,将下一个时刻作为当前时刻,重复执行上述操作,直到将24:00:00作为当前时刻。
S103、将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。
在本申请的具体实施例中,电子设备可以将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。例如,假设当前时间段的起始时间为00:00:00,终止时间为:24:00:00。在本步骤中,电子设备可以在24:00:00上将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除;然后将下一个时间段作为当前时间段,重复执行上述操作,直到电子设备的监控功能被关闭为止。
本申请实施例提出的区域进出监控方法,若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控;若在当前时刻上监控到至少一个监控对象,将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻;然后将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。也就是说,本申请可以在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。而在现有的区域进出监控方法中,只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储。因为本申请采用了在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除的技术手段,克服了现有技术中只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储的技术问题,本申请提供的技术方案,能够针对大量的监控数据进行存储,不仅可以保证区域进出监控服务的计算响应能力,还可以保持监控数据的完整性,从而可以提升整个监控服务系统的性能;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
实施例二
图2是本申请实施例二提供的区域进出监控方法的流程示意图。如图2所示,区域进出监控方法可以包括以下步骤:
S201、若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控。
S202、若在当前时刻上监控到至少一个监控对象,则在至少一个监控对象中提取出一个监控对象作为当前监控对象。
在本申请的具体实施例中,若在当前时刻上监控到至少一个监控对象,电子设备可以在至少一个监控对象中提取出一个监控对象作为当前监控对象。例如,假设在当前时刻上监控到3个监控对象,分别为:监控对象1、监控对象2和监控对象3;在本步骤中,电子设备可以先提取出监控对象1作为当前监控对象。
S203、若MySQL中已存在当前监控对象对应的表项,则在当前监控对象对应的表项中更新与其对应的监控数据;若MySQL中不存在当前监控对象对应的表项,则在MySQL中新建一个当前监控对象对应的表项,并在当前监控对象对应的表项中添加与其对应的监控数据;重复执行上述操作,直到在至少一个监控对象中提取出各个监控对象;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻。
在本申请的具体实施例中,若MySQL中已存在当前监控对象对应的表项,则电子设备可以在当前监控对象对应的表项中更新与其对应的监控数据;若MySQL中不存在当前监控对象对应的表项,则电子设备可以在MySQL中新建一个当前监控对象对应的表项,并在当前监控对象对应的表项中添加与其对应的监控数据;重复执行上述操作,直到在至少一个监控对象中提取出各个监控对象;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻。例如,假设在当前时刻上监控到3个监控对象,分别为:监控对象1、监控对象2和监控对象3;在本步骤中,电子设备可以先在这3个监控对象中提取出监控对象1作为当前监控对象;若MySQL中已存在监控对象1对应的表项,则在监控对象1对应的表项中更新与其对应的监控数据;若MySQL中不存在监控对象1对应的表项,则在MySQL中新建一个监控对象1对应的表项,并在监控对象1对应的表项中添加与其对应的监控数据;然后电子设备再提取出监控对象2作为当前监控对象,重复执行上述操作,直到提取出各个监控对象;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻。
S204、将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。
在本申请的具体实施例中,电子设备可以将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。HDFS是指被设计成适合运行在通用硬件上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。HDFS有着高容错性的特点,并且设计用来部署在低廉的硬件上。而且它提供高吞吐量来访问应用程序的数据,适合那些有着超大数据集的应用程序。另外,ES(Elastic Search)是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful Web接口。Elastic Search是用Java语言开发的,并作为Apache许可条款下的开放源码发布,是一种流行的企业级搜索引擎。Elastic Search用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。
较佳地,在本申请的具体实施例中,电子设备可以按照第一预设周期将ES中存储的监控数据进行清除;按照第二预设周期将HDFS中存储的监控数据进行清除;其中,第一预设周期小于第二预设周期。例如,电子设备可以每隔5天将ES中存储的监控数据进行清除;每隔10天将HDFS中存储的监控数据进行清除,这样不会由于ES和HDFS存储过多的监控数据而导致其查询性能受到影响。
本申请实施例提出的区域进出监控方法,若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控;若在当前时刻上监控到至少一个监控对象,将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻;然后将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。也就是说,本申请可以在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。而在现有的区域进出监控方法中,只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储。因为本申请采用了在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除的技术手段,克服了现有技术中只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储的技术问题,本申请提供的技术方案,能够针对大量的监控数据进行存储,不仅可以保证区域进出监控服务的计算响应能力,还可以保持监控数据的完整性,从而可以提升整个监控服务系统的性能;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
实施例三
图3是本申请实施例三提供的区域进出监控方法的流程示意图。如图3所示,区域进出监控方法可以包括以下步骤:
S301、若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控。
S302、若在当前时刻上监控到至少一个监控对象,在至少一个监控对象中提取出一个监控对象作为当前监控对象。
S303、若MySQL中已存在当前监控对象对应的表项,则在当前监控对象对应的表项中更新与其对应的监控数据;若MySQL中不存在当前监控对象对应的表项,则在MySQL中新建一个当前监控对象对应的表项,并在当前监控对象对应的表项中添加与其对应的监控数据;重复执行上述操作,直到在至少一个监控对象中提取出各个监控对象;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻。
在本申请的具体实施例中,若MySQL中已存在当前监控对象对应的表项,则电子设备可以在当前监控对象对应的表项中更新与其对应的监控数据;若MySQL中不存在当前监控对象对应的表项,则电子设备可以在MySQL中新建一个当前监控对象对应的表项,并在当前监控对象对应的表项中添加与其对应的监控数据;重复执行上述操作,直到在至少一个监控对象中提取出各个监控对象;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻。具体地,电子设备在当前监控对象对应的表项中更新与其对应的监控数据时,可以在当前监控对象对应的表项中将当前监控对象对应的监控次数加1,并将当前监控对象对应的进出入状态更新为离开状态。此外,电子设备在当前监控对象对应的表项中添加与其对应的监控数据时,可以在当前监控对象对应的表项中将当前监控对象对应的监控次数添加为1,并将当前监控对象对应的进出入状态添加为进入状态。
S304、将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。
S305、按照第一预设周期将ES中存储的监控数据进行清除;按照第二预设周期将HDFS中存储的监控数据进行清除;其中,第一预设周期小于第二预设周期。
较佳地,在本申请的具体实施例中,电子设备还可以接收用户针对目标监控对象的查询请求;其中,查询请求中携带目标监控对象的标识;然后根据目标监控对象的标识在MySQL中查找目标监控对象对应的监控数据;若在MySQL中查找到目标监控对象对应的监控数据,则电子设备可以将目标监控对象对应的监控数据返回给用户;若在MySQL中未查找到目标监控对象对应的监控数据,则电子设备可以在ES中查找目标监控对象对应的监控数据。进一步的,若在ES中查找到目标监控对象对应的监控数据,则电子设备可以将目标监控对象对应的监控数据返回给用户;若在ES中未查找到目标监控对象对应的监控数据,则在HDFS中查找目标监控对象对应的监控数据。进一步的,若在HDFS中查找到目标监控对象对应的监控数据,则将目标监控对象对应的监控数据返回给用户;若在HDFS中未查找到目标监控对象对应的监控数据,则电子设备可以通知用户未查找到目标监控对象对应的监控数据。
在现有技术中,测试传统DBMS对于当前表结构及数据的性能瓶颈,被设计使用MySQL,按照真实的数据进行模拟。MySQL对于不同数据量,在执行区域监控SQL语句的性能分析如下:
数据记录(万行) | 平均执行时间(秒) |
100w | 0.35s |
200w | 1.26s |
500w | 5.57s |
1000w | 1min26s |
2000w | 2min33s |
表1
如上述表1所示,按照当前需求每天增量1000w数据的话,通过每日定时清除转储前一天的所有数据,MySQL的查询耗时在2分钟30秒左右。在最坏的情况下,服务响应时间为2分30秒左右,显然这样的响应时间是不能被Web服务接受的。本申请按照天级别对每天的数据增量进行转储,开发对应的定时任务将数据转储到HDFS做备份、ES中用于后续其他历史数据计算分析等任务,转储结束后,对00:00:00点前的所有数据进行删除操作,从而保证MySQL新一天任务的计算和存储性能。本申请提供一套从数据接入、存储、缓存、计算、转储、清除的策略,打破数据传输不能接入分布式存储系统的限制,同时在不超过MySQL性能的瓶颈下,合理利用MySQL资源,并且设计定时策略对数据转储到HDFS和ES等分布式存储系统并对旧有数据进行清除,在完成区域进出监控服务计算响应能力的同时,保持了整体系统流程的数据完整性。所以,使用本申请的产品比同类产品在数据接入和转储策略上,突破特定场景下数据传输仅支持传统DBMS的限制,充分利用MySQL的存储和计算性能,再定时将区域进出监控的计算结果缓存到内存中,从而极大的提高了响应效率,提高整体服务系统的性能。
本申请实施例提出的区域进出监控方法,若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控;若在当前时刻上监控到至少一个监控对象,将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻;然后将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。也就是说,本申请可以在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。而在现有的区域进出监控方法中,只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储。因为本申请采用了在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除的技术手段,克服了现有技术中只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储的技术问题,本申请提供的技术方案,能够针对大量的监控数据进行存储,不仅可以保证区域进出监控服务的计算响应能力,还可以保持监控数据的完整性,从而可以提升整个监控服务系统的性能;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
实施例四
图4是本申请实施例四提供的区域进出监控装置的结构示意图。如图4所示,所述装置400包括:监控模块401、第一存储模块402和第二存储模块403;其中,
所述监控模块401,用于若当前时刻不为当前时间段的最后一个时刻,则在所述当前时刻上对进出预定区域的预定类型的监控对象进行监控;
所述第一存储模块402,用于若在所述当前时刻上监控到至少一个监控对象,则将各个监控对象对应的监控数据存储至关系型数据库管理系统MySQL中;将下一个时刻作为所述当前时刻,重复执行上述操作,直到所述当前时刻为所述当前时间段的最后一个时刻;
所述第二存储模块403,用于将所述MySQL中存储的监控数据分别转存至HDFS和ES中,并将所述MySQL中存储的监控数据进行清除。
图5是本申请实施例四提供的第一存储模块的结构示意图。如图5所示,所述第一存储模块402包括:提取子模块4021和存储子模块4022;其中,
所述提取子模块4021,用于在所述至少一个监控对象中提取出一个监控对象作为当前监控对象;
所述存储子模块4022,用于若所述MySQL中已存在所述当前监控对象对应的表项,则在所述当前监控对象对应的表项中更新与其对应的监控数据;若所述MySQL中不存在所述当前监控对象对应的表项,则在所述MySQL中新建一个所述当前监控对象对应的表项,并在所述当前监控对象对应的表项中添加与其对应的监控数据;重复执行上述操作,直到在所述至少一个监控对象中提取出各个监控对象。
进一步的,所述存储子模块4022,具体用于在所述当前监控对象对应的表项中将所述当前监控对象对应的监控次数加1,并将所述当前监控对象对应的进出入状态更新为离开状态。
进一步的,所述存储子模块4022,具体用于在所述当前监控对象对应的表项中将所述当前监控对象对应的监控次数添加为1,并将所述当前监控对象对应的进出入状态添加为进入状态。
进一步的,所述第二存储模块403,还用于按照第一预设周期将所述ES中存储的监控数据进行清除;按照第二预设周期将所述HDFS中存储的监控数据进行清除;其中,所述第一预设周期小于所述第二预设周期。
进一步的,所述装置还包括:查询模块404(图中未示出),用于接收用户针对目标监控对象的查询请求;其中,所述查询请求中携带所述目标监控对象的标识;根据所述目标监控对象的标识在所述MySQL中查找所述目标监控对象对应的监控数据;若在所述MySQL中查找到所述目标监控对象对应的监控数据,则将所述目标监控对象对应的监控数据返回给所述用户;若在所述MySQL中未查找到所述目标监控对象对应的监控数据,则在所述ES中查找所述目标监控对象对应的监控数据。
进一步的,所述查询模块404,还用于若在所述ES中查找到所述目标监控对象对应的监控数据,则将所述目标监控对象对应的监控数据返回给所述用户;若在所述ES中未查找到所述目标监控对象对应的监控数据,则在所述HDFS中查找所述目标监控对象对应的监控数据。
上述区域进出监控装置可执行本申请任意实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请任意实施例提供的区域进出监控方法。
实施例五
根据本申请的实施例,本申请还提供了一种电子设备和一种可读存储介质。
如图6所示,是根据本申请实施例的区域进出监控方法的电子设备的框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本申请的实现。
如图6所示,该电子设备包括:一个或多个处理器601、存储器602,以及用于连接各部件的接口,包括高速接口和低速接口。各个部件利用不同的总线互相连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样,可以连接多个电子设备,各个设备提供部分必要的操作(例如,作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图6中以一个处理器601为例。
存储器602即为本申请所提供的非瞬时计算机可读存储介质。其中,所述存储器存储有可由至少一个处理器执行的指令,以使所述至少一个处理器执行本申请所提供的区域进出监控方法。本申请的非瞬时计算机可读存储介质存储计算机指令,该计算机指令用于使计算机执行本申请所提供的区域进出监控方法。
存储器602作为一种非瞬时计算机可读存储介质,可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块,如本申请实施例中的区域进出监控方法对应的程序指令/模块(例如,附图4所示的监控模块401、第一存储模块402和第二存储模块403)。处理器601通过运行存储在存储器602中的非瞬时软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例中的区域进出监控方法。
存储器602可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据区域进出监控方法的电子设备的使用所创建的数据等。此外,存储器602可以包括高速随机存取存储器,还可以包括非瞬时存储器,例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中,存储器602可选包括相对于处理器601远程设置的存储器,这些远程存储器可以通过网络连接至区域进出监控方法的电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
区域进出监控方法的电子设备还可以包括:输入装置603和输出装置604。处理器601、存储器602、输入装置603和输出装置604可以通过总线或者其他方式连接,图6中以通过总线连接为例。
输入装置603可接收输入的数字或字符信息,以及产生与区域进出监控方法的电子设备的用户设置以及功能控制有关的键信号输入,例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置604可以包括显示设备、辅助照明装置(例如,LED)和触觉反馈装置(例如,振动电机)等。该显示设备可以包括但不限于,液晶显示器(LCD)、发光二极管(LED)显示器和等离子体显示器。在一些实施方式中,显示设备可以是触摸屏。
此处描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、专用ASIC(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
这些计算程序(也称作程序、软件、软件应用、或者代码)包括可编程处理器的机器指令,并且可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。如本文使用的,术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如,磁盘、光盘、存储器、可编程逻辑装置(PLD)),包括,接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
根据本申请实施例的技术方案,若当前时刻不为当前时间段的最后一个时刻,则在当前时刻上对进出预定区域的预定类型的监控对象进行监控;若在当前时刻上监控到至少一个监控对象,将各个监控对象对应的监控数据存储至MySQL中;将下一个时刻作为当前时刻,重复执行上述操作,直到当前时刻为当前时间段的最后一个时刻;然后将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。也就是说,本申请可以在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除。而在现有的区域进出监控方法中,只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储。因为本申请采用了在当前时间段的最后一个时刻将MySQL中存储的监控数据分别转存至HDFS和ES中,并将MySQL中存储的监控数据进行清除的技术手段,克服了现有技术中只能针对数据量小于等于MySQL的存储容量的监控数据进行存储,而对于超过存储容量的监控数据则无法对其进行存储的技术问题,本申请提供的技术方案,能够针对大量的监控数据进行存储,不仅可以保证区域进出监控服务的计算响应能力,还可以保持监控数据的完整性,从而可以提升整个监控服务系统的性能;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本申请公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本申请保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本申请的精神和原则之内所作的修改、等同替换和改进等,均应包含在本申请保护范围之内。
Claims (14)
1.一种区域进出监控方法,其特征在于,所述方法包括:
若当前时刻不为当前时间段的最后一个时刻,则在所述当前时刻上对进出预定区域的预定类型的监控对象进行监控;
若在所述当前时刻上监控到至少一个监控对象,则在所述至少一个监控对象中提取出一个监控对象作为当前监控对象;
若MySQL中已存在所述当前监控对象对应的表项,则在所述当前监控对象对应的表项中更新与其对应的监控数据;若所述MySQL中不存在所述当前监控对象对应的表项,则在所述MySQL中新建一个所述当前监控对象对应的表项,并在所述当前监控对象对应的表项中添加与其对应的监控数据;重复执行上述操作,直到在所述至少一个监控对象中提取出各个监控对象;将下一个时刻作为所述当前时刻,重复执行上述操作,直到所述当前时刻为所述当前时间段的最后一个时刻;
将所述MySQL中存储的监控数据分别转存至分布式文件系统HDFS和搜索服务器ES中,并将所述MySQL中存储的监控数据进行清除。
2.根据权利要求1所述的方法,其特征在于,所述在所述当前监控对象对应的表项中更新与其对应的监控数据,包括:
在所述当前监控对象对应的表项中将所述当前监控对象对应的监控次数加1,并将所述当前监控对象对应的进出入状态更新为离开状态。
3.根据权利要求1所述的方法,其特征在于,所述在所述当前监控对象对应的表项中添加与其对应的监控数据,包括:
在所述当前监控对象对应的表项中将所述当前监控对象对应的监控次数添加为1,并将所述当前监控对象对应的进出入状态添加为进入状态。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
按照第一预设周期将所述ES中存储的监控数据进行清除;按照第二预设周期将所述HDFS中存储的监控数据进行清除;其中,所述第一预设周期小于所述第二预设周期。
5.根据权利要求3所述的方法,其特征在于,所述方法还包括:
接收用户针对目标监控对象的查询请求;其中,所述查询请求中携带所述目标监控对象的标识;
根据所述目标监控对象的标识在所述MySQL中查找所述目标监控对象对应的监控数据;
若在所述MySQL中查找到所述目标监控对象对应的监控数据,则将所述目标监控对象对应的监控数据返回给所述用户;若在所述MySQL中未查找到所述目标监控对象对应的监控数据,则在所述ES中查找所述目标监控对象对应的监控数据。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
若在所述ES中查找到所述目标监控对象对应的监控数据,则将所述目标监控对象对应的监控数据返回给所述用户;若在所述ES中未查找到所述目标监控对象对应的监控数据,则在所述HDFS中查找所述目标监控对象对应的监控数据。
7.一种区域进出监控装置,其特征在于,所述装置包括:监控模块、第一存储模块和第二存储模块;其中,
所述监控模块,用于若当前时刻不为当前时间段的最后一个时刻,则在所述当前时刻上对进出预定区域的预定类型的监控对象进行监控;
所述第一存储模块,包括:提取子模块和存储子模块;其中,
所述提取子模块,用于若在所述当前时刻上监控到至少一个监控对象,则在所述至少一个监控对象中提取出一个监控对象作为当前监控对象;
所述存储子模块,用于若所述MySQL中已存在所述当前监控对象对应的表项,则在所述当前监控对象对应的表项中更新与其对应的监控数据;若所述MySQL中不存在所述当前监控对象对应的表项,则在所述MySQL中新建一个所述当前监控对象对应的表项,并在所述当前监控对象对应的表项中添加与其对应的监控数据;重复执行上述操作,直到在所述至少一个监控对象中提取出各个监控对象;将下一个时刻作为所述当前时刻,重复执行上述操作,直到所述当前时刻为所述当前时间段的最后一个时刻;所述第二存储模块,用于将所述MySQL中存储的监控数据分别转存至分布式文件系统HDFS和搜索服务器ES中,并将所述MySQL中存储的监控数据进行清除。
8.根据权利要求7所述的装置,其特征在于:
所述存储子模块,具体用于在所述当前监控对象对应的表项中将所述当前监控对象对应的监控次数加1,并将所述当前监控对象对应的进出入状态更新为离开状态。
9.根据权利要求7所述的装置,其特征在于:
所述存储子模块,具体用于在所述当前监控对象对应的表项中将所述当前监控对象对应的监控次数添加为1,并将所述当前监控对象对应的进出入状态添加为进入状态。
10.根据权利要求7所述的装置,其特征在于,所述第二存储模块,还用于按照第一预设周期将所述ES中存储的监控数据进行清除;按照第二预设周期将所述HDFS中存储的监控数据进行清除;其中,所述第一预设周期小于所述第二预设周期。
11.根据权利要求9所述的装置,其特征在于,所述装置还包括:查询模块,用于接收用户针对目标监控对象的查询请求;其中,所述查询请求中携带所述目标监控对象的标识;根据所述目标监控对象的标识在所述MySQL中查找所述目标监控对象对应的监控数据;若在所述MySQL中查找到所述目标监控对象对应的监控数据,则将所述目标监控对象对应的监控数据返回给所述用户;若在所述MySQL中未查找到所述目标监控对象对应的监控数据,则在所述ES中查找所述目标监控对象对应的监控数据。
12.根据权利要求11所述的装置,其特征在于,所述查询模块,还用于若在所述ES中查找到所述目标监控对象对应的监控数据,则将所述目标监控对象对应的监控数据返回给所述用户;若在所述ES中未查找到所述目标监控对象对应的监控数据,则在所述HDFS中查找所述目标监控对象对应的监控数据。
13.一种电子设备,其特征在于,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-6中任一项所述的方法。
14.一种存储有计算机指令的非瞬时计算机可读存储介质,其特征在于,所述计算机指令用于使所述计算机执行权利要求1-6中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010506889.6A CN111694854B (zh) | 2020-06-05 | 2020-06-05 | 一种区域进出监控方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010506889.6A CN111694854B (zh) | 2020-06-05 | 2020-06-05 | 一种区域进出监控方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111694854A CN111694854A (zh) | 2020-09-22 |
CN111694854B true CN111694854B (zh) | 2023-07-21 |
Family
ID=72479611
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010506889.6A Active CN111694854B (zh) | 2020-06-05 | 2020-06-05 | 一种区域进出监控方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111694854B (zh) |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102761570A (zh) * | 2011-04-28 | 2012-10-31 | 同济大学 | 基于代理的网格资源监控系统及监控方法 |
CN104601689A (zh) * | 2015-01-12 | 2015-05-06 | 北京中交兴路车联网科技有限公司 | 一种车辆联网监控系统推送数据的方法 |
CN105426482A (zh) * | 2015-11-20 | 2016-03-23 | 华东交通大学 | 一种图库一体的铁路10kV配电网海量监控信息HBase转存方法 |
CN105912703A (zh) * | 2016-04-26 | 2016-08-31 | 北京百度网讯科技有限公司 | 数据存储方法、查询方法及装置 |
WO2016179055A1 (en) * | 2015-05-01 | 2016-11-10 | Ebay Inc. | Constructing a data adaptor in an enterprise server data ingestion environment |
CN106385328A (zh) * | 2016-08-31 | 2017-02-08 | 沈阳行天科技有限公司 | 一种基于嵌入式系统来管理企业核心设备的监控方法 |
CN108664608A (zh) * | 2018-05-11 | 2018-10-16 | 中国联合网络通信集团有限公司 | 可疑人员的识别方法、装置及计算机可读存储介质 |
CN108932184A (zh) * | 2018-06-21 | 2018-12-04 | 新华三云计算技术有限公司 | 监控装置及方法 |
CN109117087A (zh) * | 2018-07-19 | 2019-01-01 | 北京蜂盒科技有限公司 | 采集监控数据的方法、装置、存储介质及电子设备 |
CN109543067A (zh) * | 2018-11-19 | 2019-03-29 | 陕西西普数据通信股份有限公司 | 基于人工智能的企业生产状况实时监控分析系统 |
CN109582547A (zh) * | 2018-12-11 | 2019-04-05 | 平安科技(深圳)有限公司 | 电子装置、监控数据告警方法及存储介质 |
CN109871367A (zh) * | 2019-02-28 | 2019-06-11 | 江苏实达迪美数据处理有限公司 | 一种基于Redis和HBase的分布式冷热数据分离方法 |
CN109885453A (zh) * | 2019-02-18 | 2019-06-14 | 国家计算机网络与信息安全管理中心 | 基于流数据处理的大数据平台监控系统 |
CN110334670A (zh) * | 2019-07-10 | 2019-10-15 | 北京迈格威科技有限公司 | 对象监控方法及装置、电子设备、存储介质 |
CN110866642A (zh) * | 2019-11-15 | 2020-03-06 | 北京明略软件系统有限公司 | 安全监控方法、装置、电子设备和计算机可读存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10200389B2 (en) * | 2016-02-29 | 2019-02-05 | Palo Alto Networks, Inc. | Malware analysis platform for threat intelligence made actionable |
-
2020
- 2020-06-05 CN CN202010506889.6A patent/CN111694854B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102761570A (zh) * | 2011-04-28 | 2012-10-31 | 同济大学 | 基于代理的网格资源监控系统及监控方法 |
CN104601689A (zh) * | 2015-01-12 | 2015-05-06 | 北京中交兴路车联网科技有限公司 | 一种车辆联网监控系统推送数据的方法 |
WO2016179055A1 (en) * | 2015-05-01 | 2016-11-10 | Ebay Inc. | Constructing a data adaptor in an enterprise server data ingestion environment |
CN105426482A (zh) * | 2015-11-20 | 2016-03-23 | 华东交通大学 | 一种图库一体的铁路10kV配电网海量监控信息HBase转存方法 |
CN105912703A (zh) * | 2016-04-26 | 2016-08-31 | 北京百度网讯科技有限公司 | 数据存储方法、查询方法及装置 |
CN106385328A (zh) * | 2016-08-31 | 2017-02-08 | 沈阳行天科技有限公司 | 一种基于嵌入式系统来管理企业核心设备的监控方法 |
CN108664608A (zh) * | 2018-05-11 | 2018-10-16 | 中国联合网络通信集团有限公司 | 可疑人员的识别方法、装置及计算机可读存储介质 |
CN108932184A (zh) * | 2018-06-21 | 2018-12-04 | 新华三云计算技术有限公司 | 监控装置及方法 |
CN109117087A (zh) * | 2018-07-19 | 2019-01-01 | 北京蜂盒科技有限公司 | 采集监控数据的方法、装置、存储介质及电子设备 |
CN109543067A (zh) * | 2018-11-19 | 2019-03-29 | 陕西西普数据通信股份有限公司 | 基于人工智能的企业生产状况实时监控分析系统 |
CN109582547A (zh) * | 2018-12-11 | 2019-04-05 | 平安科技(深圳)有限公司 | 电子装置、监控数据告警方法及存储介质 |
CN109885453A (zh) * | 2019-02-18 | 2019-06-14 | 国家计算机网络与信息安全管理中心 | 基于流数据处理的大数据平台监控系统 |
CN109871367A (zh) * | 2019-02-28 | 2019-06-11 | 江苏实达迪美数据处理有限公司 | 一种基于Redis和HBase的分布式冷热数据分离方法 |
CN110334670A (zh) * | 2019-07-10 | 2019-10-15 | 北京迈格威科技有限公司 | 对象监控方法及装置、电子设备、存储介质 |
CN110866642A (zh) * | 2019-11-15 | 2020-03-06 | 北京明略软件系统有限公司 | 安全监控方法、装置、电子设备和计算机可读存储介质 |
Non-Patent Citations (2)
Title |
---|
Hierarchical Multi-log cloud-based search engine;Ajitpal Singh,Horacio Gonzalez Velez;《IEEE》;20141002 * |
基于云平台的集群故障监控的研究与实现;朱娜娜;《中国优秀硕士学位论文全文数据库》;20150415 * |
Also Published As
Publication number | Publication date |
---|---|
CN111694854A (zh) | 2020-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105653425A (zh) | 基于复杂事件处理引擎的监控系统 | |
CN110737682A (zh) | 一种缓存操作方法、装置、存储介质和电子设备 | |
CN111966677A (zh) | 数据报表的处理方法、装置、电子设备及存储介质 | |
EP3869339A1 (en) | Data storage method and apparatus for blockchain, device, and medium | |
CN113364877B (zh) | 数据处理方法、装置、电子设备和介质 | |
CN111090674A (zh) | 一种基于热词和缓存的搜索引擎系统 | |
CN102946410A (zh) | 网络同步方法和装置 | |
CN102946411A (zh) | 网络同步系统 | |
CN111782147A (zh) | 用于集群扩缩容的方法和装置 | |
CN111767321A (zh) | 节点关系网络的确定方法、装置、电子设备和存储介质 | |
CN111291082B (zh) | 数据聚合处理方法、装置、设备及存储介质 | |
CN104376096A (zh) | 基于缓冲区的异步更新的方法 | |
CN113568938A (zh) | 数据流处理方法、装置、电子设备及存储介质 | |
CN111259090A (zh) | 关系数据的图生成方法、装置、电子设备和存储介质 | |
CN111694854B (zh) | 一种区域进出监控方法、装置、电子设备及存储介质 | |
CN111782357B (zh) | 标签控制方法及装置、电子设备和可读存储介质 | |
CN111290714B (zh) | 数据读取方法和装置 | |
US10379780B2 (en) | Statistics management for scale-out storage | |
Bornea et al. | Double index nested-loop reactive join for result rate optimization | |
JP7316305B2 (ja) | グラフ計算の処理方法、装置、電子機器及び記憶媒体 | |
CN114691781A (zh) | 一种数据同步方法、系统、装置、设备及介质 | |
CN111340222B (zh) | 神经网络模型搜索方法、装置以及电子设备 | |
CN111475572B (zh) | 区块生成方法、装置、设备和介质 | |
CN114500443A (zh) | 消息推送方法、装置、系统、电子设备和存储介质 | |
CN108984431B (zh) | 用于清空过期缓存的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |