CN104335203A - 企业级数据收集系统和方法 - Google Patents

企业级数据收集系统和方法 Download PDF

Info

Publication number
CN104335203A
CN104335203A CN201280073661.6A CN201280073661A CN104335203A CN 104335203 A CN104335203 A CN 104335203A CN 201280073661 A CN201280073661 A CN 201280073661A CN 104335203 A CN104335203 A CN 104335203A
Authority
CN
China
Prior art keywords
data
rsp
data source
manager
source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280073661.6A
Other languages
English (en)
Other versions
CN104335203B (zh
Inventor
雅各布·费特尔松
奥哈德·科尔库斯
戴维·巴斯
伊扎尔·基萨尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Varonis Systems Inc
Original Assignee
Varonis Systems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Varonis Systems Inc filed Critical Varonis Systems Inc
Publication of CN104335203A publication Critical patent/CN104335203A/zh
Application granted granted Critical
Publication of CN104335203B publication Critical patent/CN104335203B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3089Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/805Real-time
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/86Event-based monitoring

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Data Mining & Analysis (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Operations Research (AREA)
  • Marketing (AREA)
  • Educational Administration (AREA)
  • Development Economics (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种企业数据收集系统,包括:至少一个数据库,用于通过网络接收并存储从在位于不同位置的多个物理地点处的数据源收集的数据;多个远程同步探测器(RSP),位于多个物理地点,所述远程同步探测器(RSP)执行以下数据收集功能中的至少一个:实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报;以及至少一个RSP管理器,距多个远程同步探测器中的至少一个远程定位,并且可操作以控制借助于所述多个远程同步探测器(RSP)的数据收集和发送的操作以及编排借助于所述多个远程同步探测器(RSP)的数据收集和发送。

Description

企业级数据收集系统和方法
相关申请的引用
本文引用了受让人所有的以下专利和专利申请,其公开内容以引用的方式并入本文。
美国专利号7,555,482和7,606,801;
美国公开专利申请号:2007/0244899、2008/0271157、2009/0100058、2009/0119298;2009/0265780;2011/0010758;2011/0060916;2011/0061093、2011/0061111、2011/0184989、2011/0296490和2012/0054283;以及
美国专利申请序列号:13/106,023;13/159,903;以及13/303,826。
技术领域
本发明总体涉及企业级数据收集。
背景技术
以下公开专利被认为代表目前的技术水平:
美国专利号7,555,482和7,606,801;以及
美国公开专利申请号:2011/0060916。
发明内容
本发明寻求提供一种用于企业级数据收集的高效系统和方法。
根据本发明的一个优选实施例,提供了一种企业数据收集系统,包括:至少一个数据库,用于通过网络接收并存储从在位于不同位置的多个物理地点处的数据源收集的数据;多个远程同步探测器(RSP),位于多个物理地点,所述远程同步探测器(RSP)执行以下数据收集功能中的至少一个:实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报;以及至少一个RSP管理器,距所述多个远程同步探测器中的至少一个远程定位,并且可操作以控制借助于所述多个远程同步探测器(RSP)的数据收集和发送的操作以及编排借助于所述多个远程同步探测器(RSP)的数据收集和发送。
优选地,所述至少一个RSP协调在多个数据源上执行的至少一些数据收集功能的定时,所述至少一些数据收集功能可以同时发生。优选地,所述至少一个RSP管理器根据以下标准中的至少一个协调借助于多个RSP的数据收集的定时:网络延迟、网络带宽、在RSP处的当日时间/周中的日期、数据源的大小、数据源的类型、特定数据源相对于其它数据源的优先级,以及数据源的用户定义的优先级。
优选地,特定数据源相对于其它数据源的优先级至少部分基于以下中的至少一个的特征:实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报。优选地,所述至少一个RSP管理器协调来自多个所述RSP的数据发送的定时,来自多个所述RSP的数据发送可同时发生。
优选地,所述至少一个RSP管理器根据以下标准中的至少一个协调多个RSP的数据发送时间:网络延迟、网络带宽、在RSP处的当日时间/周中的日期、在至少一个数据库处的当日时间/周中的日期、要发送的数据的量、特定RSP相对于其它RSP的优先级,以及数据源的用户定义的优先级。
优选地,特定RSP相对于其它RSP的优先级至少部分基于以下中的至少一个的特征:实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报。
根据本发明的另一个优选实施例,还提供了一种企业数据收集方法,包括:通过网络发送和接收并存储从在位于不同位置的多个物理地点处的数据源收集的数据;在多个物理地点处进行以下数据收集功能中的至少一个:实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报;并且,控制和编排多个物理地点处的数据收集以及通过网络的所述数据的发送和接收。
优选地,所述方法还包括:协调在多个数据源上执行的至少一些数据收集功能的定时,所述至少一些数据收集功能可以同时发生。优选地,所述协调包括根据以下标准中的至少一个协调从所述多个物理地点处的数据源的数据收集的定时:网络延迟、网络带宽、在物理地点处的当日时间/周中的日期、数据源的大小、数据源的类型、特定数据源相对于其它数据源的优先级,以及数据源的用户定义的优先级。
优选地,特定数据源相对于其它数据源的优先级至少部分基于以下中的至少一个的特征:实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报。
优选地,所述方法还包括协调来自多个物理地点中的多个的数据发送的定时,来自多个物理地点中的多个的数据发送可同时发生。
优选地,协调从多个物理地点中的多个的数据发送的定时根据以下标准中的至少一个:网络延迟、网络带宽、在物理地点处的当日时间/周中的日期、在至少一个数据库处的当日时间/周中的日期、要发送的数据的量、特定物理地点相对于其它物理地点的优先级,以及数据源的用户定义的优先级。
优选地,特定物理地点相对于其它物理地点的优先级至少部分基于以下中的至少一个的特征:实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报。
附图说明
通过以下详细说明,结合附图,将更完整地理解本发明,在附图中:
图1为用于在位于不同位置的多个物理地点进行企业级数据收集的系统和方法的简化图示,包括实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报。
图2为图1所示的系统和方法的一部分的简化图示,示出了从多个物理地点中的一个处的多个数据源的数据收集的至少一些的定时的协调;
图3A为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于在RSP处的当日时间/周中的日期的数据收集的定时的协调;
图3B为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于示出了特定数据源相对于其它数据源的优先级的所述多个RSP中的一些RSP至少部分基于实时事件收集和文件系统的特征的数据收集的定时的协调;
图4A为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于要从其监控的数据源中收集的数据的量以及基于其监控的数据源的类型的数据收集的定时的协调;
图4B为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于数据源的类型以及基于位于各个物理地点中的RSP的用户定义的优先级的数据收集的定时的协调;
图4C为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP基于数据源的大小以及基于数据源的类型的数据收集的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征的特定数据源相对于其它数据源的优先级;
图5A为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于网络延迟的的数据发送的定时的协调;
图5B为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于网络带宽的数据发送的定时的协调;
图5C为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于要发送的收集的数据的量的数据发送的定时的协调;
图5D为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于数据源的类型的数据发送的定时的协调;
图5E为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于位于各个物理地点中的RSP的用户定义的优先级的数据发送的定时的协调;
图5F为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于在RSP处的当日时间/周中的日期的数据发送的定时的协调;
图5G为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于数据源的用户定义的优先级的数据发送的定时的协调;
图5H为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于在RSP处的当日时间/周中的日期以及基于要发送的收集的数据的量的数据发送的定时的协调;
图6A为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP基于数据源的大小以及基于数据源的类型的数据收集的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征的特定数据源相对于其它数据源的优先级,并示出了从多个RSP中的一些基于在RSP处的当日时间/周中的日期的数据发送中的至少一些的定时的协调;
图6B为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP基于数据源的大小以及基于数据源的类型的数据收集的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征以及基于特定RSP相对于其它RSP的优先级的特定数据源相对于其它数据源的优先级;以及
图7为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP基于数据源的大小以及基于数据源的类型的数据收集的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征以及基于特定RSP相对于其它RSP的优先级的特定数据源相对于其它数据源的优先级,并示出了从多个RSP中的一些基于在RSP处的当日时间/周中的日期的数据发送中的至少一些的定时的协调。
具体实施方式
图1是用于在位于不同位置的多个物理地点进行企业级数据收集的系统和方法的简化图示,包括实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报。
如图1所示,提供了用于在位于不同位置的多个物理地点进行企业级数据收集的系统,包括实时事件收集、针对数据结构和许可的文件系统爬行、数据内容分析、数据索引、数据标记和事件触发警报。图1的系统优选包括至少一个数据库,用于通过网络接收并存储从在位于不同位置的多个物理地点处的数据源收集的数据。
在所示实施例中只示出了单个数据库100,应理解的是,也可以提供多个数据库100。所述网络可为任何合适的网络,例如,常规企业范围网络,包括位于不同位置的数据库系统、服务器、路由器、计算机和其它网络设备。所述数据源可为诸如文件系统、数据库、NAS设备、文件服务器、服务器和交换(Exchange)服务器、ERP系统和CRM系统的任何适用数据源。在所示实施例中,数据源110、112和114显示位于伦敦,数据源120、122和124显示位于巴黎,并且数据源130、132和134显示位于罗马。数据源140、142和144显示位于西雅图,数据源150、152和154显示位于北京。数据源160、162和164显示位于德里。
根据本发明的优选实施例,多个远程同步探测器(RSP)位于多个物理地点。在所示实施例中,RSP 171、172和173分别位于伦敦、巴黎和罗马,RSP 174和175分别位于西雅图和北京,并且RSP 176位于德里。
根据本发明的优选实施例,远程同步探测器(RSP)171-176各自进行以下数据收集功能中的至少一个:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;以及
事件触发警报。
进一步,根据本发明的优选实施例,距多个远程同步探测器中的至少一个远程定位的至少一个RSP管理器可操作以控制借助于所述多个远程同步探测器(RSP)的数据收集和发送的操作以及编排借助于所述多个远程同步探测器(RSP)的数据收集和发送。在所示实施例中,单个RSP管理器180,一般为服务器,位于纽约的RSP管理地点,其容纳数据库100。RSP管理器180控制借助于远程同步探测器(RSP)171-176的数据收集和发送的操作并编排借助于多个远程同步探测器(RSP)171-176的数据收集和发送,多个远程同步探测器(RSP)171-176位于不同位置,在地理上远离该管理器。
如图1所示,RSP管理器180发出各种类型的指令至RSP 171-176。在所示示例中,RSP管理器180将开始事件收集指令发送给伦敦的RSP171,将开始数据内容分析指令发送给巴黎的RSP 172,并且将开始数据标记指令发送给罗马的RSP 173。RSP管理器180一般还将开始文件系统爬行指令发送给西雅图的RSP 174,接收从北京的RSP 175发送的警报,并将开始数据索引指令发送给德里的RSP 176。
现在参考图2,其为图1所示的系统和方法的一部分的简化图示,示出了从多个物理地点中的一个处的多个数据源的数据收集的至少一些的定时的协调。如图2所示,位于罗马的RSP 173协调在其监控的多个数据源上执行的至少一些数据收集功能的定时,所述至少一些数据收集功能可以同时发生。例如,如图2所示,RSP 173指示其监控的文件服务器130、132和134在特定时间执行各种数据收集功能。特别地,如图2所示,在01:00整,RSP 173指示文件服务器130对位于其上的文件系统进行爬行。同时,RSP 173还指示文件服务器132分析其数据内容。在02:00,RSP 173指示文件服务器134对存储在其上的数据进行索引。
现在参考图3A,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于在RSP处的当日时间/周中的日期的数据收集的定时的协调。在图3A的示例中,由RSP管理器180执行管理规则,借此指示RSP在其各个数据源的使用率低时(例如,在当地夜间时段)从这些数据源中收集数据。
在本发明的一个实施例的场景下,本规则的实施如图3A所示:在伦敦当地时间午夜12:00,RSP管理器180指示位于伦敦的RSP 171从其监控的服务器110、112和114中收集数据。随后,在巴黎当地时间上午2:00,RSP管理器180指示位于巴黎的RSP 172从其监控的服务器120、122和124中收集数据。同时,在罗马当地时间上午2:00,RSP管理器180指示位于罗马的RSP 130从其监控的服务器130、132和134中收集数据。
随后,在北京当地时间第二天午夜12:00,RSP管理器180指示位于北京的RSP 175从其监控的服务器150、152和154中收集数据。随后,在德里当地时间午夜12:00,RSP管理器180指示位于德里的RSP 160从其监控的服务器160、162和164中收集数据。随后,在西雅图当地时间午夜12:00,RSP管理器180指示位于西雅图的RSP 174从其监控的服务器140、142和144中收集数据。
现在参照图3B,其为图1和图2所示的系统和方法的一部分的简化图示,示出了至少部分基于实时事件收集和文件系统的特征、借助于示出了特定数据源相对于其它数据源的优先级的所述多个RSP中的一些RSP收集数据的定时的协调。
在图3B的示例中,由RSP管理器180执行管理规则,借此关于发生了访问事件的数据源对来自数据源的数据收集给予优先级。
RSP管理器180通过周期性地询问各个RSP,知晓了与各个数据源相关的访问事件。在知晓了与位于德里的RSP 176监控的服务器160相关的这种访问事件之后,RSP管理器180立即先指示RSP 176从服务器160中收集数据。一般在这之后,RSP管理器180响应于与位于罗马的RSP 173监控的服务器130相关的较早的访问事件,指示RSP 173从服务器130中收集数据。一般在这之后,RSP管理器180响应于与位于伦敦的RSP 171监控的服务器112相关的更早的访问事件,指示RSP 110从服务器112中收集数据。
一般在这之后,RSP管理器180响应于与位于北京的RSP 175监控的服务器152相关的又更早的访问事件,指示RSP 175从服务器152中收集数据。一般在这之后,RSP管理器180响应于与位于巴黎的RSP 172监控的服务器120相关的还更早的访问事件,指示RSP 172从服务器120中收集数据。一般在这之后,RSP管理器180响应于与位于西雅图的RSP 174监控的服务器142相关的更早的访问事件,指示RSP 174从服务器142中收集数据。
应理解的是,优先级的确定不仅可基于访问事件,还可另外地和/或替代地基于以下功能中的一个或多个:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;以及
事件触发警报。
现在参考图4A,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP、基于要从其监控的数据源中收集的数据的量以及基于其监控的数据源的类型来收集数据的定时的协调。
要收集的数据的量在图4A中用内含数据的多个文件柜表示。数据源的类型用以下标准缩写表示:EXS–交换(Exchange)服务器、 文件服务器、NAS-网络附加存储设备、服务器和文件服务器。
在图4A的示例中,由RSP管理器180执行两条管理规则,即:
借此指示监控实时临界性较高的数据源的RSP在监控实时临界性较低的数据源的RSP之前收集数据;并且
借此指示要发送的数据的量较大的RSP在要发送的数据的量较小的RSP之前收集数据。
在本发明的一个实施例的场景下,这些规则的实施如图4A所示:RSP管理器180先指示位于德里的监控实时临界性相对较高的多个交换(Exchange)服务器的RSP 176从其监控的数据源中收集相对较大的数据的量。
随后,RSP管理器180指示位于罗马的监控实时临界性稍低的多个文件服务器的RSP 173从其监控的数据源中收集稍小的数据的量。随后,RSP管理器180指示位于北京的监控实时临界性稍低的多个网络附加存储设备的RSP 175从其监控的数据源中收集相似大小的数据的量。随后,RSP管理器180指示位于伦敦的监控实时临界性稍低的多个服务器的RSP 171从其监控的数据源中收集相似大小的数据的量。
随后,RSP管理器180指示位于巴黎的也监控多个服务器的RSP 172从其监控的数据源中收集相对较小的数据的量。随后,RSP管理器180指示位于西雅图的监控实时临界性稍低的多个文件服务器的RSP 174从其监控的数据源中收集相似大小的数据的量。
参考图4B,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP、基于数据源的类型以及基于位于各个物理地点中的RSP的用户定义的优先级来收集数据的定时的协调。
从中收集数据的数据源的类型在图4B中用以下标准缩写表示:EXS-交换(Exchange)服务器、文件服务器、NAS-网络附加存储设备、服务器和文件服务器。
在图4B的示例中,RSP管理器180执行两条管理规则,即:
借此指示监控实时临界性较高的数据源的RSP在监控实时临界性较低的数据源的RSP之前收集数据;并且
借此指示用户定义的优先级较高的RSP在用户定义的优先级较低的RSP之前收集数据。
在本发明的一个实施例的场景下,这些规则的实施如图4B所示:RSP管理器180先指示位于伦敦的用户定义的优先级较高的监控实时临界性相对较高的多个Exchange服务器的RSP 171从其监控的数据源中收集数据。
随后,RSP管理器180指示位于德里的用户定义的优先级稍低的监控实时临界性稍低的监控多个文件服务器的RSP 176从其监控的数据源中收集数据。随后,RSP管理器180指示位于罗马的用户定义的优先级更稍低的也监控多个文件服务器的RSP 173从其监控的数据源中收集数据。随后,RSP管理器180指示位于西雅图的用户定义的优先级更稍低的也监控多个文件服务器的RSP 174从其监控的数据源中收集数据。
随后,RSP管理器180指示位于巴黎的用户定义的优先级更稍低的监控实时临界性相对较低的多个服务器的RSP 172从其监控的数据源中收集数据。随后,RSP管理器180指示位于北京的用户定义的优先级更稍低的监控实时临界性更稍低的多个文件服务器的RSP 175从其监控的数据源中收集数据。
现在参考图4C,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP、基于数据源的大小以及基于数据源的类型来收集数据的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征的特定数据源相对于其它数据源的优先级。
要收集的数据的量在图4C中用内含数据的多个文件柜表示。数据源的类型用以下标准缩写表示:EXS-交换(Exchange)服务器、 文件服务器、NAS-网络附加存储设备、服务器和文件服务器。
在图4C的示例中,由RSP管理器180执行四条管理规则,即:
借此指示监控实时临界性较高的数据源的RSP在监控实时临界性较低的数据源的RSP之前收集数据;
借此指示要发送的数据的量较大的RSP在要发送的数据的量较小的RSP之前收集数据;
借此关于发生了访问事件的数据源对来自数据源的数据收集给予优先级;并且
借此关于最近发生了针对数据结构和权限的文件系统爬行的数据源对来自数据源的的数据收集给予优先级。
在本发明的一个实施例的场景下,这些规则的实施如图4C所示:RSP管理器180通过周期性地询问各个RSP,知晓了与各个数据源相关的访问事件和针对数据结构和许可的文件系统爬行。在知晓了与位于德里的RSP176监控的数据源,且针对所述数据源最近进行了文件系统爬行相关的这种访问事件之后,RSP管理器180指示监控实时临界性相对较高的多个交换(Exchange)服务器的RSP 176从其监控的数据源中收集相对较大的数据的量。
随后,RSP管理器180响应于与位于罗马的RSP 173监控的数据源相关的较早的访问事件,以及RSP 173监控的数据源的较早的文件系统爬行,指示监控实时临界性稍低的多个文件服务器的RSP从其监控的数据源中收集稍小的数据的量。一般在此之后,RSP管理器180响应于与位于伦敦的RSP 171监控的数据源相关的更早的访问事件,以及RSP171监控的数据源的较早的文件系统爬行,指示监控实时临界性稍低的多个网络附加存储设备的RSP 171从其监控的数据源中收集稍小的数据的量。
随后,RSP管理器180响应于与位于巴黎的RSP 172监控的数据源相关的更早的访问事件,以及RSP 172监控的数据源的又更早的文件系统爬行,指示监控实时临界性稍低的多个服务器的RSP 172从其监控的数据源中收集稍小的数据的量。
随后,RSP管理器180响应于与位于北京的RSP 175监控的数据源相关的更早的访问事件,以及RSP 175监控的数据源的又更早的文件系统爬行,指示监控实时临界性稍低的多个文件服务器的RSP 175从其监控的数据源中收集稍小的数据的量。随后,RSP管理器180响应于与位于西雅图的RSP 174监控的数据源相关的更早的访问事件,以及RSP 174监控的数据源的又更早的文件系统爬行,指示也监控多个服务器的RSP 174从其监控的数据源中收集大小相似的数据的量。
现在参考图5A,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于网络延迟来收集数据的定时的协调。网络延迟在图5A中用交通拥堵程度表示,拥堵越大,延迟越长。在图5A的示例中,由RSP管理器180执行管理规则,借此在延迟较大的网络连接之前使用延迟较小的网络连接。
在本发明的一个实施例的场景下,本规则的实施如图5A所示:RSP管理器180先指示位于德里的RSP 176通过延迟相对较小的网络连接306将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于西雅图的RSP 174通过延迟时间稍长于网络连接306的网络连接315将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于北京的RSP 175通过延迟时间稍长于网络连接315的网络连接324将其收集的数据发送给RSP管理器180。
随后,RSP管理器180指示位于伦敦的RSP 171通过延迟时间稍长于网络连接324的网络连接331将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于巴黎的RSP 172通过延迟时间稍长于网络连接331的网络连接332将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于罗马的RSP 173通过延迟时间稍长于网络连接332的网络连接333将其收集的数据发送给RSP管理器180。
现在参考图5B,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于网络带宽的数据收集的定时的协调。网络带宽在图5B中用多个线路表示,线路越多,带宽越大。在图5B的示例中,由RSP管理器180执行管理规则,借此在带宽较小的网络连接之前使用带宽较大的网络连接。
在本发明的一个实施例的场景下,本规则的实施如图5B所示:RSP管理器180先指示位于德里的RSP 176通过带宽相对较大的网络连接336将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于西雅图的RSP 174通过带宽稍小于网络连接336的网络连接345将其收集的数据发送给RSP管理器180。随后,或者同时,RSP管理器180指示位于北京的RSP 175通过带宽与网络连接345相似的网络连接354将其收集的数据发送给RSP管理器180。
随后,RSP管理器180指示位于伦敦的RSP 171通过带宽稍小于网络连接354的网络连接361将其收集的数据发送给RSP管理器180。随后,或者同时,RSP管理器180指示位于巴黎的RSP 172通过带宽与网络连接361相似的网络连接362将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于罗马的RSP 173通过带宽稍小于网络连接362的网络连接363将其收集的数据发送给RSP管理器180。
现在参照图5C,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于要发送的收集的数据的量的数据发送的定时的协调。要发送的收集的数据的量在图5C中用内含数据的多个文件柜表示。在图5C的示例中,由RSP管理器180执行管理规则,借此指示要发送的数据的量较大的RSP在要发送的数据的量较小的RSP之前发送数据。
在本发明的一个实施例的场景下,本规则的实施如图5C所示:RSP管理器180先指示位于德里的RSP 176将其收集的相对较大的数据的量发送给RSP管理器180。随后,RSP管理器180指示位于罗马的RSP 173将其收集的稍小的数据的量发送给RSP管理器180。随后,RSP管理器180指示位于伦敦的RSP 171将其收集的更小的数据的量发送给RSP管理器180。
随后,RSP管理器180指示位于北京的RSP 175将其收集的更小的数据的量发送给RSP管理器180。随后,或者同时,RSP管理器180指示位于巴黎的RSP 172将其收集的大小相似的数据的量发送给RSP管理器180。随后,RSP管理器180指示位于西雅图的RSP 174将其收集的更小的数据的量发送给RSP管理器180。
现在参照图5D,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP根据RSP监控的数据源的类型的数据发送的定时的协调。数据源的类型用以下标准缩写表示:EXS-交换(Exchange)服务器、文件服务器、NAS-网络附加存储设备、服务器和文件服务器。在图5D的示例中,由RSP管理器180执行管理规则,借此指示监控实时临界性较大的数据源的RSP在监控实时临界性较小的数据源的RSP之前发送数据。
在本发明的一个实施例的场景下,本规则的实施如图5D所示:RSP管理器180先指示监控实时临界性被确定为例如相对较高的多个交换(Exchange)服务器的RSP 171将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示监控实时临界性被确定为例如稍低的多个文件服务器的RSP 176将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示监控实时临界性被确定为例如更低的多个NAS设备的RSP 173将其收集的数据发送给RSP管理器180。
随后,RSP管理器180指示监控实时临界性被确定为例如更低的多个文件服务器的RSP 174将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示监控实时临界性被确定为例如又更低的多个文件服务器的RSP 172将其收集的数据发送给RSP管理器180。随后,或者同时,RSP管理器180指示也监控实时临界性被确定为例如同样低的多个文件服务器的RSP 175将其收集的数据发送给RSP管理器180。
现在参照图5E,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于位于各个物理地点中的RSP的用户定义的优先级的数据发送的定时的协调。
在图5E的示例中,由RSP管理器180执行管理规则,借此指示用户定义的优先级较高的RSP在用户定义的优先级较低的RSP之前发送数据。在图5E的示例中,指示位于用户定义的优先级较高的位置的RSP在位于用户定义的优先级较低的位置的RSP之前发送数据。
在本发明的一个实施例的场景下,本规则的实施如图5E所示:RSP管理器180先指示位于北京的用户定义的优先级最高的RSP 175将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于西雅图的用户定义的优先级第二高的RSP 174将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于德里,用户定义的优先级第三高的RSP 176将其收集的数据发送给RSP管理器180。
随后,RSP管理器180指示位于巴黎的用户定义的优先级第四高的RSP 172将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于伦敦的用户定义的优先级第五高的RSP 171将其收集的数据发送给RSP管理器180。随后,RSP管理器180指示位于罗马,用户定义的优先级下一个最高的RSP 173将其收集的数据发送给RSP管理器180。
现在参照图5F,其为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于在RSP处的当日时间/周中的日期的数据发送中的至少一些的定时的协调。
在图5F的示例中,由RSP管理器180执行管理规则,借此指示RSP在数据源的使用率低时(例如,在当地夜间时段)发送数据。
在本发明的一个实施例的场景下,本规则的实施如图5F所示:在伦敦当地时间午夜12:00,RSP管理器180指示位于伦敦的RSP 171发送从其监控的服务器110、112和114中收集的数据。随后,在巴黎当地时间上午2:00,RSP管理器180指示位于巴黎的RSP 172发送从其监控的服务器120、122和124中收集的数据。同时,在罗马当地时间上午2:00,RSP管理器180指示位于罗马的RSP 173发送从其监控的服务器130、132和134中收集的数据。
随后,在北京当地时间第二天午夜12:00,RSP管理器180指示位于北京的RSP 175发送从其监控的服务器150、152和154中收集的数据。随后,在德里当地时间午夜12:00,RSP管理器180指示位于德里的RSP 176发送从其监控的服务器160、162和164中收集的数据。随后,在西雅图当地时间午夜12:00,RSP管理器180指示位于西雅图的RSP 174发送从其监控的服务器140、142和144中收集的数据。
图5G为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于数据源的用户定义的优先级的数据发送的定时的协调。
在图5G的示例中,由RSP管理器180执行管理规则,借此指示用户定义的优先级较高的RSP在用户定义的优先级较低的RSP之前发送数据。在图5E的示例中,指示位于用户定义的优先级较高的位置的RSP在位于用户定义的优先级较低的位置的RSP之前发送数据。
在本发明的一个实施例的场景下,本规则的实施如图5G所示:RSP管理器180先指示位于伦敦的用户定义的优先级较高的RSP 171发送从其监控的数据源中收集的数据。
随后,RSP管理器180指示位于德里的用户定义的优先级稍低的RSP176发送从其监控的数据源中收集的数据。随后,RSP管理器180指示位于罗马的用户定义的优先级更低的RSP 173发送从其监控的数据源中收集的数据。随后,RSP管理器180指示位于西雅图的用户定义的优先级更低的RSP 174发送从其监控的数据源中收集的数据。
随后,RSP管理器180指示位于巴黎的用户定义的优先级更低的RSP172发送从其监控的数据源中收集的数据。随后,RSP管理器180指示位于北京的用户定义的优先级更低的RSP 175发送从其监控的数据源中收集的数据。
图5H为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于所述多个RSP中的一些RSP基于在RSP处的当日时间/周中的日期以及基于要发送的收集的数据的量的数据发送的定时的协调。要发送的收集的数据的量在图5H中用内含数据的多个文件柜表示。在图5H的示例中,由RSP管理器180执行两条管理规则,即:
借此指示RSP在这些RSP的网络连接的使用率低时(例如,在当地夜间时段发送)从其各个数据源中收集的数据。
借此指示要发送的数据的量较大的RSP在要发送的数据的量较小的RSP之前发送数据。
在本发明的一个实施例的场景下,这些规则的实施如图5H所示:
在伦敦当地时间午夜12:00,RSP管理器180指示位于伦敦的RSP 171发送从其监控的数据源中收集的数据。随后,在巴黎当地时间上午2:00,RSP管理器180指示位于巴黎的RSP 172发送从其监控的数据源中收集的相对较大的数据的量。由于位于罗马的RSP 173要发送的数据少于位于巴黎的RSP 172,来自位于罗马的RSP 130的数据发送被设为晚于位于巴黎的RSP 172的数据发送。由此,在罗马当地时间上午2:30,RSP管理器180指示位于罗马的RSP 173发送从其监控的数据源中收集的数据。
随后,在北京当地时间第二天午夜12:00,RSP管理器180指示位于北京的RSP 175发送从其监控的数据源中收集的数据。随后,在德里当地时间午夜12:00,RSP管理器180指示位于德里的RSP 176发送从其监控的数据源中收集的数据。随后,在西雅图当地时间午夜12:00,RSP管理器180指示位于西雅图的RSP 174发送从其监控的数据源中收集的数据。
图6A为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP基于数据源的大小以及基于数据源的类型的数据收集的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征的特定数据源相对于其它数据源的优先级,并示出了从多个RSP中的一些基于在RSP处的当日时间/周中的日期的数据发送中的至少一些的定时的协调。
要收集的数据的量在图6A中用内含数据的多个文件柜表示。数据源的类型用以下标准缩写表示:EXS-交换(Exchange)服务器、 文件服务器、NAS-网络附加存储设备、服务器和文件服务器。
在图6A的示例中,由RSP管理器180执行五条管理规则,即:
借此指示监控实时临界性较高的数据源的RSP在监控实时临界性较低的数据源的RSP之前收集数据;
借此指示要发送的数据的量较大的RSP在要发送的数据的量较小的RSP之前收集数据;
借此关于发生了访问事件的数据源对来自数据源的数据收集给予优先级;
借此关于最近发生了针对数据结构和权限的文件系统爬行的数据源对来自数据源的的数据收集给予优先级;并且
借此指示RSP在数据源的使用率低时(例如,在当地夜间时段)发送数据。
在本发明的一个实施例的场景下,这些规则的实施如图6A所示:RSP管理器180通过周期性地询问各个RSP,知晓了与各个数据源相关的访问事件和针对数据结构和许可的文件系统爬行。在知晓了与位于伦敦的RSP171监控的且最近进行了文件系统爬行的数据源相关的这种访问事件之后,RSP管理器180指示监控实时临界性相对较高的多个交换(Exchange)服务器的RSP 171在伦敦当地时间午夜12:00从其监控的数据源中收集相对较大的数据的量。
随后,RSP管理器180响应于与位于巴黎的RSP 172监控的数据源相关的较早的访问事件,以及RSP 172监控的数据源的较早的文件系统爬行,指示监控实时临界性稍低的多个文件服务器的RSP 172在巴黎当地时间上午2:00从其监控的数据源中收集稍小的数据的量。随后,RSP管理器180响应于与位于罗马的RSP 173监控的数据源相关的较早的访问事件,以及RSP 173监控的数据源的较早的文件系统爬行,指示监控实时临界性稍低的多个网络附加存储设备的RSP 173从其监控的数据源中收集稍小的数据的量。
随后,RSP管理器180响应于与位于北京的RSP 175监控的数据源相关的更早的访问事件,以及RSP 175监控的数据源的又更早的文件系统爬行,指示监控实时临界性稍低的多个服务器的RSP 175在北京当地时间第二天午夜12:00从其监控的数据源中收集相似的数据的量。
随后,RSP管理器180响应于与位于德里的RSP 176监控的数据源相关的更早的访问事件,以及RSP 176监控的数据源的又更早的文件系统爬行,指示监控实时临界性稍低的多个文件服务器的RSP 176在德里当地时间午夜12:00从其监控的数据源中收集稍小的数据的量。
随后,RSP管理器180响应于与位于西雅图的RSP 174监控的数据源相关的更早的访问事件,以及RSP 174监控的数据源的又更早的文件系统爬行,指示监控实时临界性稍低的多个服务器的RSP 174从其监控的数据源中收集相似的数据的量。
图6B为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP基于数据源的大小以及基于数据源的类型的数据收集的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征以及基于特定RSP相对于其它RSP的优先级的特定数据源相对于其它数据源的优先级。
要收集的数据的量在图6B中用内含数据的多个文件柜表示。数据源的类型用以下标准缩写表示:EXS-交换(Exchange)服务器、 文件服务器、NAS-网络附加存储设备、服务器和文件服务器。
在图6B的示例中,由RSP管理器180执行五条管理规则,即:
借此指示监控实时临界性较高的数据源的RSP在监控实时临界性较低的数据源的RSP之前收集数据;
借此指示要发送的数据的量较大的RSP在要发送的数据的量较小的RSP之前收集数据;
借此关于发生了访问事件的数据源对来自数据源的数据收集给予优先级;
借此关于最近发生了针对数据结构和权限的文件系统爬行的数据源对来自数据源的的数据收集给予优先级;并且
借此指示用户定义的优先级较高的RSP在用户定义的优先级较低的RSP之前发送数据。
在本发明的一个实施例的场景下,这些规则的实施如图6B所示:RSP管理器180通过周期性地询问各个RSP,知晓了与各个数据源相关的访问事件和针对数据结构和许可的文件系统爬行。在知晓了与位于德里的用户定义的优先级最高的RSP 176监控的,且最近进行了文件系统爬行的数据源相关的这种访问事件之后,RSP管理器180立即指示位于德里的监控实时临界性相对较高的多个交换(Exchange)服务器的RSP 176从其监控的数据源中收集相对较大的数据的量。
随后,RSP管理器180响应于与RSP 173监控的数据源相关的较早的访问事件,以及用户定义的优先级为第二高的RSP 173监控的数据源的较早的文件系统爬行,指示位于罗马的监控实时临界性相对较高的多个文件服务器的RSP 173从其监控的数据源中收集稍小的数据的量。随后,RSP管理器180响应于与RSP 171监控的数据源相关的更早的访问事件,以及RSP 171监控的数据源的更早的文件系统爬行,指示位于伦敦的用户定义的优先级为第三高的监控实时临界性稍低的多个网络附加存储设备的RSP 171从其监控的数据源中收集稍小的数据的量。
随后,RSP管理器180响应于与RSP 172监控的数据源相关的更早的访问事件,以及RSP 172监控的数据源的又更早的文件系统爬行,指示位于巴黎的用户定义的优先级为第四高的监控实时临界性稍低的多个服务器的RSP 172从其监控的数据源中收集相似的数据的量。
随后,RSP管理器180响应于与RSP 175监控的数据源相关的更早的访问事件,以及RSP 175监控的数据源的又更早的文件系统爬行,指示位于北京的用户定义的优先级为第五高的监控实时临界性稍低的多个文件服务器的RSP 175从其监控的数据源中收集稍小的数据的量。随后,或者同时,RSP管理器180响应于与RSP 174监控的数据源相关的更早的访问事件,以及RSP 174监控的数据源的又更早的文件系统爬行,指示位于西雅图的用户定义的优先级为第六高并且也监控多个文件服务器的RSP 174从其监控的数据源中收集相似的数据的量。
图7为图1和图2所示的系统和方法的一部分的简化图示,示出了借助于多个RSP中的一些RSP基于数据源的大小以及基于数据源的类型的数据收集的定时的协调,并示出了至少部分基于实时事件收集以及针对数据结构和许可的文件系统爬行的特征以及基于特定RSP相对于其它RSP的优先级的特定数据源相对于其它数据源的优先级,并示出了从多个RSP中的一些基于在RSP处的当日时间/周中的日期的数据发送中的至少一些的定时的协调。
要收集的数据的量在图7中用内含数据的多个文件柜表示。数据源的类型用以下标准缩写表示:EXS-交换(Exchange)服务器、 文件服务器、NAS-网络附加存储设备、服务器和文件服务器。
在图7的示例中,由RSP管理器180执行六条管理规则,即:
借此指示监控实时临界性较高的数据源的RSP在监控实时临界性较低的数据源的RSP之前收集数据;
借此指示要发送的数据的量较大的RSP在要发送的数据的量较小的RSP之前收集数据;
借此关于发生了访问事件的数据源对来自数据源的数据收集给予优先级;
借此关于最近发生了针对数据结构和权限的文件系统爬行的数据源对来自数据源的的数据收集给予优先级;
借此指示RSP在数据源的使用率低时(例如,在当地夜间时段)发送数据;并且
借此指示用户定义的优先级较高的RSP在用户定义的优先级较低的RSP之前发送数据。
在本发明的一个实施例的场景下,这些规则的实施如图7所示:RSP管理器180通过周期性地询问各个RSP,知晓了与各个数据源相关的访问事件和针对数据结构和许可的文件系统爬行。在知晓了与位于伦敦的用户定义的优先级最高的RSP 171监控的且最近进行了文件系统爬行的数据源相关的这种访问事件之后,RSP管理器180指示监控实时临界性相对较高的多个交换(Exchange)服务器的RSP 171在伦敦当地时间午夜12:00从其监控的数据源中收集相对较大的数据的量。
随后,RSP管理器180响应于与位于巴黎的RSP 172监控的数据源相关的较早的访问事件,以及用户定义的优先级为第二高的RSP 172监控的数据源的较早的文件系统爬行,指示监控实时临界性稍低的多个文件服务器的RSP 172在巴黎当地时间上午2:00从其监控的数据源中收集稍小的数据的量。随后,RSP管理器180响应于与位于罗马的RSP 173监控的数据源相关的更早的访问事件,以及RSP 173监控的数据源的较早的文件系统爬行,指示用户定义的优先级为第三高的监控实时临界性稍低的多个网络附加存储设备的RSP 173从其监控的数据源中收集稍小的数据的量。
随后,RSP管理器180响应于与位于北京的RSP 175监控的数据源相关的更早的访问事件,以及RSP 175监控的数据源的又更早的文件系统爬行,指示用户定义的优先级为第四高的监控实时临界性稍低的多个服务器的RSP 175在北京当地时间第二天午夜12:00从其监控的数据源中收集相似的数据的量。
随后,RSP管理器180响应于与位于德里的RSP 176监控的数据源相关的更早的访问事件,以及RSP 176监控的数据源的又更早的文件系统爬行,指示用户定义的优先级为第五高的监控实时临界性稍低的多个文件服务器的RSP 176在德里当地时间午夜12:00从其监控的数据源中收集稍小的数据的量。
随后,RSP管理器180响应于与位于西雅图的SP 174监控的数据源相关的更早的访问事件,以及RSP 174监控的数据源的又更早的文件系统爬行,指示用户定义的优先级为第六高并且也监控多个文件服务器的RSP 174从其监控的数据源中收集相似的数据的量。
本领域的技术人员应理解的是,本发明并不限于上文特别显示和描述的内容。相反,本领域的技术人员在阅读前述说明时应理解的是,与现有技术相比,本发明的范围包括上文所述的各种特征及其变型的组合和子组合。

Claims (14)

1.一种企业数据收集系统,包括:
至少一个数据库,用于通过网络接收并存储从位于不同位置的多个物理地点处的数据源收集的数据;
多个远程同步探测器RSP,位于所述多个物理地点处,所述远程同步探测器RSP执行以下数据收集功能中的至少一个:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;和
事件触发警报;以及
至少一个RSP管理器,远离所述多个远程同步探测器中的至少一个,并且可操作为借助于所述多个远程同步探测器RSP来控制数据收集和发送的操作以及编排数据收集和发送。
2.根据权利要求1所述的企业数据收集系统,并且其中,所述至少一个RSP协调在多个所述数据源上执行的至少一些数据收集功能的定时,所述至少一些数据收集功能可以同时发生。
3.根据权利要求2所述的企业数据收集系统,并且其中,所述至少一个RSP管理器根据以下标准中的至少一个协调借助于所述多个RSP中的一些RSP收集数据的定时:
网络延迟;
网络带宽;
在所述RSP处的当日时间/周中的日期;
数据源的大小;
数据源的类型;
特定数据源相对其它数据源的优先级;以及
数据源的用户定义的优先级。
4.根据权利要求3所述的企业数据收集系统,并且其中,所述特定数据源相对于其它数据源的优先级至少部分基于以下中的至少一个的特征:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;以及
事件触发警报。
5.根据权利要求1至4中任一项所述的企业数据收集系统,并且其中,所述至少一个RSP管理器协调从所述多个RSP中的一些RSP发送数据的定时,所述发送可同时发生。
6.根据权利要求5所述的企业数据收集系统,并且其中,所述至少一个RSP管理器根据以下标准中的至少一个协调从所述多个RSP中的一些RSP发送数据的定时:
网络延迟;
网络带宽;
在所述RSP处的当日时间/周中的日期;
在所述至少一个数据库处的当日时间/周中的日期;
要发送的数据的量;
特定RSP相对于其它RSP的优先级;以及
数据源的用户定义的优先级。
7.根据权利要求6所述的企业数据收集系统,并且其中,所述特定RSP相对于其它RSP的优先级至少部分基于以下中的至少一个的特征:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;以及
事件触发警报。
8.一种企业数据收集方法,包括:
通过网络发送和接收并存储从位于不同位置的多个物理地点处的数据源收集的数据;
在所述多个物理地点处进行以下数据收集功能中的至少一个:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;以及
事件触发警报;并且
控制和编排所述多个物理地点处的数据收集以及通过所述网络的所述数据的发送和接收。
9.根据权利要求8所述的企业数据收集方法,还包括:协调在多个所述数据源上执行的至少一些数据收集功能的定时,所述至少一些数据收集功能可以同时发生。
10.根据权利要求9所述的企业数据收集方法,并且其中,所述协调包括根据以下标准中的至少一个协调从所述多个物理地点处的数据源收集数据的定时:
网络延迟;
网络带宽;
在物理地点处的当日时间/周中的日期;
数据源的大小;
数据源的类型;
特定数据源相对其它数据源的优先级;以及
数据源的用户定义的优先级。
11.根据权利要求10所述的企业数据收集方法,并且其中,所述特定数据源相对于其它数据源的优先级至少部分基于以下中的至少一个的特征:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;以及
事件触发警报。
12.根据权利要求8至11中任一项所述的企业数据收集方法,还包括协调从所述多个物理地点中的一些物理地点发送数据的定时,多个所述物理地点的数据发送可同时发生。
13.根据权利要求12所述的企业数据收集方法,并且其中,所述协调从所述多个物理地点中的一些物理地点发送数据的定时根据以下标准中的至少一个:
网络延迟;
网络带宽;
在物理地点处的当日时间/周中的日期;
在至少一个数据库处的当日时间/周中的日期;
要发送的数据的量;
特定物理地点相对于其它物理地点的优先级;以及
数据源的用户定义的优先级。
14.根据权利要求13所述的企业数据收集方法,并且其中,所述特定物理地点相对于其它物理地点的优先级至少部分基于以下中的至少一个的特征:
实时事件收集;
针对数据结构和许可的文件系统爬行;
数据内容分析;
数据索引;
数据标记;以及
事件触发警报。
CN201280073661.6A 2012-04-04 2012-04-04 企业级数据收集系统和方法 Expired - Fee Related CN104335203B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/IL2012/000153 WO2013150508A1 (en) 2012-04-04 2012-04-04 Enterprise level data collection systems and methodologies

Publications (2)

Publication Number Publication Date
CN104335203A true CN104335203A (zh) 2015-02-04
CN104335203B CN104335203B (zh) 2017-08-15

Family

ID=49300076

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280073661.6A Expired - Fee Related CN104335203B (zh) 2012-04-04 2012-04-04 企业级数据收集系统和方法

Country Status (4)

Country Link
EP (1) EP2834751A4 (zh)
CN (1) CN104335203B (zh)
IN (1) IN2014DN08967A (zh)
WO (1) WO2013150508A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9286316B2 (en) 2012-04-04 2016-03-15 Varonis Systems, Inc. Enterprise level data collection systems and methodologies

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1205592A (zh) * 1997-06-18 1999-01-20 株式会社东芝 数据收集系统以及该系统中使用的通信装置
CN1791897A (zh) * 2003-05-21 2006-06-21 株式会社Jms 数据收集系统及数据收集方法
US7107340B2 (en) * 2002-05-31 2006-09-12 Microsoft Corporation System and method for collecting and storing event data from distributed transactional applications
CN101364919A (zh) * 2007-01-30 2009-02-11 索尼株式会社 元数据收集系统、装置、方法和程序及内容管理服务器
US20100179940A1 (en) * 2008-08-26 2010-07-15 Gilder Clark S Remote data collection systems and methods

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6418445B1 (en) * 1998-03-06 2002-07-09 Perot Systems Corporation System and method for distributed data collection and storage
US6701324B1 (en) * 1999-06-30 2004-03-02 International Business Machines Corporation Data collector for use in a scalable, distributed, asynchronous data collection mechanism
US8082347B2 (en) * 2005-11-28 2011-12-20 Cisco Technology, Inc. Providing probe signals from a node to a centralized controller
US8078653B1 (en) * 2008-10-07 2011-12-13 Netapp, Inc. Process for fast file system crawling to support incremental file system differencing
US8086694B2 (en) * 2009-01-30 2011-12-27 Bank Of America Network storage device collector
US20110153368A1 (en) * 2009-12-17 2011-06-23 XtremeGIS, Inc. User Interactive Reinsurance Risk Analysis Application

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1205592A (zh) * 1997-06-18 1999-01-20 株式会社东芝 数据收集系统以及该系统中使用的通信装置
US7107340B2 (en) * 2002-05-31 2006-09-12 Microsoft Corporation System and method for collecting and storing event data from distributed transactional applications
CN1791897A (zh) * 2003-05-21 2006-06-21 株式会社Jms 数据收集系统及数据收集方法
CN101364919A (zh) * 2007-01-30 2009-02-11 索尼株式会社 元数据收集系统、装置、方法和程序及内容管理服务器
US20100179940A1 (en) * 2008-08-26 2010-07-15 Gilder Clark S Remote data collection systems and methods

Also Published As

Publication number Publication date
EP2834751A4 (en) 2015-12-02
CN104335203B (zh) 2017-08-15
WO2013150508A1 (en) 2013-10-10
IN2014DN08967A (zh) 2015-05-22
EP2834751A1 (en) 2015-02-11

Similar Documents

Publication Publication Date Title
US9870370B2 (en) Enterprise level data collection systems and methodologies
CN102968831B (zh) 一种电子巡更方法、终端和系统
CA2868904C (en) Method and apparatus for underground equipment monitoring
US20090225756A1 (en) Information transmission system
CN104035404A (zh) 操作票实时状态监控的开发方法
CN103095498B (zh) 话单采集方法和系统
CN204029002U (zh) 保安巡逻履职监管系统
CN103765411A (zh) 数据分析系统
CN102184311A (zh) 移动pda现场应急指挥系统
CN115190278B (zh) 一种基于数字换流站的监控系统及方法
CA3206778A1 (en) Systems and methods for the temporal monitoring and visualization of network health of direct interconnect networks
CN105553691A (zh) 一种基于电力监管信息的监控告警实现方法
CN109709839A (zh) 一种生物质电厂多级实时监控方法
CN104335203A (zh) 企业级数据收集系统和方法
CN102799768A (zh) 一种民防工程质量监督与执法巡查系统
Sasaki et al. A disaster information sharing method by the mobile servers in challenged networks
CN112751722B (zh) 数据传输质量监控方法和系统
CN111866736A (zh) 一种风险提醒方法、风险提醒装置及服务器
KR20070074867A (ko) 분산환경의 망 감시 장치 및 시스템
CN105353713A (zh) 机房监控系统
CN105704459B (zh) 应急指挥中控系统
CN100463393C (zh) 一种异构系统之间数据安全共享的装置及方法
CN107247295A (zh) 一种气象信息监控系统
CA3008536A1 (en) Autonomous cloud-based third-party monitoring
CN112135093A (zh) 一种爆炸性气体环境下的定位辅助系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170815