CN104662510A - 企业级数据元素检查系统和方法 - Google Patents

企业级数据元素检查系统和方法 Download PDF

Info

Publication number
CN104662510A
CN104662510A CN201280073615.6A CN201280073615A CN104662510A CN 104662510 A CN104662510 A CN 104662510A CN 201280073615 A CN201280073615 A CN 201280073615A CN 104662510 A CN104662510 A CN 104662510A
Authority
CN
China
Prior art keywords
data element
metadata
multiple data
collect
access event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280073615.6A
Other languages
English (en)
Other versions
CN104662510B (zh
Inventor
雅各布·费特尔松
奥哈德·科尔库斯
戴维·巴斯
伊扎尔·基萨尔
奥菲尔·克雷策-卡齐尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Varonis Systems Inc
Original Assignee
Varonis Systems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Varonis Systems Inc filed Critical Varonis Systems Inc
Priority to CN201711057610.5A priority Critical patent/CN107657065B/zh
Publication of CN104662510A publication Critical patent/CN104662510A/zh
Application granted granted Critical
Publication of CN104662510B publication Critical patent/CN104662510B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7844—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using original textual content or text extracted from visual content or transcript of audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/1734—Details of monitoring file system events, e.g. by the use of hooks, filter drivers, logs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/907—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Multimedia (AREA)
  • Debugging And Monitoring (AREA)
  • Computer And Data Communications (AREA)

Abstract

一种企业级数据元素检查系统，包括数据访问事件收集子系统，能操作以收集有关多重数据元素中的一些的数据访问事件通知；数据元素元数据修改组件，从所述数据访问事件收集子系统接收输出并提供脚本，所述脚本指示哪些数据元素已经在给定时间段做出了元数据修改；以及数据元素舞者，能操作以收集显著少于多重数据元素且基于所述脚本选择的多个数据元素的元数据和访问权限中的至少一个。

Description

企业级数据元素检查系统和方法
相关申请的引用
可参考由受让人所有的以下专利和专利申请，其公开的内容通过引用被并入本文：
美国专利号7,555,482和7,606,801；
美国公开专利申请号：2007/0244899、2008/0271157、2009/0100058、2009/0119298；2009/0265780；2011/0010758；2011/0060916；2011/0061093、2011/0061111、2011/0184989、2011/0296490和2012/0054283；以及
美国专利申请序列号：13/106,023；13/159,903；以及13/303,826。
技术领域
本发明一般涉及企业级数据元素系统和方法。
背景技术
下面的出版物被认为代表本领域的当前状态：
美国专利号7,555,482和7,606,801；以及
美国公开专利申请号：2011/0060916、2011/0061111和2011/0296490。
发明内容
本发明寻求提供企业级数据元素检查系统和方法。
因此，根据本发明的优选实施例，提供了企业级数据元素检查系统，包括：数据访问事件收集子系统，能操作以收集有关多重数据元素中的一些的数据访问事件通知；数据元素元数据修改组件，从数据访问事件收集子系统接收输出并提供脚本，所述脚本指示哪些数据元素已经在给定时间段做出了元数据修改；以及数据元素舞者，能操作以收集显著少于多重数据元素且基于脚本选择的所选的多个数据元素的元数据和访问权限中的至少一个。
还根据本发明的另一个优选实施例提供了企业级数据元素检查系统，包括：数据访问事件收集子系统，能操作来收集有关多重数据元素中的一些的数据访问事件通知；数据元素修改的元数据收集器，能操作以收集显著少于多重数据元素的多个数据元素的元数据和访问权限中的至少一个；以及数据元素爬行者，能操作以爬过多重数据元素，由此收集多重数据元素的元数据和访问权限中的至少一个。
还根据本发明的另一个优选实施例提供了企业级数据元素检查系统，包括：数据访问事件收集失败监测子系统，能操作以确定收集数据访问事件失败并提供失败通知；以及数据元素爬行者，响应于失败通知的接收能操作以爬过多重数据元素，由此收集多重数据元素的元数据和访问权限中的至少一个。
还根据本发明的另一个优选实施例提供了用于企业级数据元素检查的方法，包括：收集有关多重数据元素中的一些的数据访问事件通知；提供脚本，所述脚本指示哪些数据元素已经在给定时间段做出了元数据修改；以及收集显著少于多重数据元素且基于脚本选择的所选的多个数据元素的元数据和访问权限中的至少一个。
还根据本发明的另一个优选实施例提供了用于企业级数据元素检查的方法，包括：收集有关多重数据元素中的一些的数据访问事件通知；收集显著少于所述多重数据元素的多个数据元素的元数据和访问权限中的至少一个；以及爬过所述多重数据元素，由此收集所述多重数据元素的元数据和访问权限中的至少一个。
还根据本发明的另一个优选实施例提供了用于企业级数据元素检查的方法，包括：确定收集数据访问事件失败；提供失败通知；以及响应于失败通知的接收，爬过多重数据元素，由此收集多重数据元素的元数据和访问权限中的至少一个。
附图说明
通过结合附图的以下详细描述，本发明将被更全面地理解和领会，其中：
图1是根据本发明的优选实施例构建和操作的企业级数据元素检查系统的简化图示；
图2是图1的企业级数据元素检查系统的另一简化示意图；
图3是图1的系统和方法的简化框图说明；
图4是图1的系统的操作的简化框图说明；以及
图5是图1的系统的另一个方面的简化框图说明。
具体实施方式
现在参考图1，其是根据本发明的优选实施例构建和操作的企业级数据元素检查系统的简化图示。图1的系统优选地适合于在其除其他外还包括多个全异的服务器和客户存储数据元素(诸如文件和文件夹)的企业计算机网络中操作。
图1的系统优选包括数据访问事件收集子系统，能操作以收集有关多重数据元素中的一些的数据访问事件通知；数据元素元数据修改组件，从数据访问事件收集子系统接收输出并提供脚本，所述脚本指示哪些数据元素已经在给定时间段做出了元数据修改；以及数据元素舞者，能操作以收集显著少于多重数据元素且基于脚本选择的所选的多个数据元素的元数据和访问权限中的至少一个。
如图1所示，系统驻留在服务器100上，服务器100连接到计算机网络102，到计算机网络102连接有多个计算机服务器104和存储设备106，并且，系统优选地在后台连续运行以收集有关存储在服务器104和存储设备106上的多重数据元素的数据访问事件通知。
如进一步图1所示，系统的管理员希望使用系统来收集在特定时间段(诸如在2012年1月5日的上午8点到下午12点之间)修改的文件夹的元数据。响应于来自管理员的请求，系统为管理员提供脚本120，脚本120包括已在所关注的时间段被访问的文件夹列表。此后，管理员指示系统收集出现在脚本中的文件夹的元数据。
由系统连续收集数据访问事件通知的本发明的一个具体特征是能操作以通过周期性有选择地仅收集已知在特定时间段已经被访问的数据元素的元数据来实现所有数据元素的元数据的大致最新收集的高效保持。应理解，仅从已知在特定时间段已经被访问的数据元素中周期性有选择地收集元数据所需的时间和计算机资源显著少于从所有数据元素中收集元数据的时间。
这个具体特征进一步示于图1中。如选项A中所示，数据元素舞者150在上午08:27开始跳过多个数据元素152。如在选项A的图中清楚地示出，在舞者150跳过数据元素152时，他仅落在数据元素152的子集上，数据元素152的子集对应于脚本120中列出的数据元素，并在上午8:30完成在数据元素152上跳舞。
对比之下，如选项B所示，数据元素爬行者160在上午8:27开始爬过多个数据元素162，然而，在爬行者160爬过数据元素162时，他落在数据元素162的每一个上，由此在上午8:47完成在数据元素162上爬行，显著晚于数据元素舞者150。
应理解，系统还包括数据访问事件收集失败监测子系统，能操作以确定收集数据访问事件失败并将对应的失败通知提供到数据元素爬行者，数据元素爬行者响应于失败通知的接收能操作以爬过存储在服务器104和存储设备106上的多重数据元素，并且由此收集多重数据元素的元数据和访问权限中的至少一个。
现在参考图2，其是图1的企业级数据元素检查系统的替代简化示图。1所示。图2进一步示出本发明的具体特征，由此，初步确定组中哪些特定元素需要被处理且随后仅选择地处理这些特定元素显著地比处理组中所有元素的效率高。
如图2的选项A中所示，第一农药喷洒者200在上午6:00开始走过种植场202的行。如选项A的图示中清楚地示出，在农药喷洒者200走过种植场202时，他将农药仅喷洒到已经被确认为感染的植物，并且在上午6:30完成走过整个场地。
对比之下，如选项B所示，第二农药喷洒者210在上午6:00开始走过种植场212的行，然而在第二农药喷洒者210走过种植场212时，他将农药喷洒到种植场212的每个植物上，而不管他们是否被感染，从而在上午7:15完成走过场地，显著晚于第一农药喷洒者200。
现在参考图3，其是图1的系统的简化框图说明，参考图4，其是图1的系统的操作的简化框图说明，并参考图5，其是图1的系统的使用的另一个方面的简化框图说明。
如图3所示，企业级数据元素检查系统300包括数据访问事件收集子系统302，数据访问事件收集子系统302能操作以收集有关多重数据元素中的一些的数据访问事件通知，并能操作以与数据元素元数据修改组件304通信。数据元素元数据修改组件304优选与数据元素舞者306通信。
系统300还包括数据访问事件收集失败监测子系统310，数据访问事件收集子系统302能操作以确定数据访问事件收集子系统302收集数据访问事件失败，并能操作以将对应的失败通知提供给数据元素爬行者312，数据元素爬行者312响应于失败通知的接收能操作以爬过存储在企业中的多重数据元素，并由此收集多重数据元素的元数据和访问权限中的至少一个。
如图4所示，数据访问事件收集子系统302连续收集有关多重数据元素中的一些的数据访问事件通知，并将输出发送到数据元素元数据修改组件304。数据元素元数据修改组件304优选将脚本提供到数据元素舞者306，所述脚本指示哪些数据元素已经在给定时间段做出了元数据修改，数据元素舞者306然后仅收集脚本中所包括的数据元素的元数据和访问权限中的至少一个。
如图5所示，数据访问事件收集失败监测子系统310确定收集数据访问事件失败并提供失败通知。响应于失败通知，数据元素爬行者优选爬过多重数据元素，由此收集多重数据元素的元数据和访问权限中的至少一个。
本领域技术人员应理解，本发明不限于已经特别示出和描述的内容。跟确切地，本发明的范围包括前面描述的各种特征的组合和子组合以及在本领域技术人员阅读前面的描述后将想到的且不存在于现有技术中的前面描述的各种特征的组合和子组合的修改。

Claims (6)

1.一种企业级数据元素检查系统，包括：
数据访问事件收集子系统，能操作以收集与多重数据元素中的一些有关的数据访问事件通知；
数据元素元数据修改组件，从所述数据访问事件收集子系统接收输出并提供脚本，所述脚本指示哪些数据元素已经在给定时间段做出了元数据修改；以及
数据元素舞者，能操作以收集显著少于所述多重数据元素且基于所述脚本选择的所选的多个数据元素的元数据和访问权限中的至少一个。
2.一种企业级数据元素检查系统，包括：
数据访问事件收集子系统，能操作以收集与多重数据元素中的一些有关的数据访问事件通知；
数据元素修改的元数据收集器，能操作以收集显著少于所述多重数据元素的多个数据元素的元数据和访问权限中的至少一个；以及
数据元素爬行者，能操作以爬过所述多重数据元素，由此收集所述多重数据元素的元数据和访问权限中的至少一个。
3.一种企业级数据元素检查系统，包括：
数据访问事件收集失败监测子系统，能操作以确定收集数据访问事件失败并提供失败通知；以及
数据元素爬行者，响应于所述失败通知的接收能操作以爬过多重数据元素，由此收集所述多重数据元素的元数据和访问权限中的至少一个。
4.一种用于企业级数据元素检查的方法，包括：
收集与多重数据元素中的一些有关的数据访问事件通知；
提供脚本，所述脚本指示哪些数据元素已经在给定时间段做出了元数据修改；以及
收集显著少于所述多重数据元素且基于所述脚本选择的所选的多个数据元素的元数据和访问权限中的至少一个。
5.一种用于企业级数据元素检查的方法，包括：
收集与多重数据元素中的一些有关的数据访问事件通知；
收集显著少于所述多重数据元素的多个数据元素的元数据和访问权限中的至少一个；以及
爬过所述多重数据元素，由此收集所述多重数据元素的元数据和访问权限中的至少一个。
6.一种用于企业级数据元素检查的方法，包括：
确定收集数据访问事件失败；
提供失败通知；以及
响应于所述失败通知的接收，爬过多重数据元素，由此收集所述多重数据元素的元数据和访问权限中的至少一个。
CN201280073615.6A 2012-04-04 2012-04-04 企业级数据元素检查系统和方法 Expired - Fee Related CN104662510B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711057610.5A CN107657065B (zh) 2012-04-04 2012-04-04 包括计算机可读介质的系统和企业级数据元素检查的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/IL2012/000147 WO2013150507A2 (en) 2012-04-04 2012-04-04 Enterprise level data element review systems and methodologies

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201711057610.5A Division CN107657065B (zh) 2012-04-04 2012-04-04 包括计算机可读介质的系统和企业级数据元素检查的方法

Publications (2)

Publication Number Publication Date
CN104662510A true CN104662510A (zh) 2015-05-27
CN104662510B CN104662510B (zh) 2017-11-28

Family

ID=49301123

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201711057610.5A Expired - Fee Related CN107657065B (zh) 2012-04-04 2012-04-04 包括计算机可读介质的系统和企业级数据元素检查的方法
CN201280073615.6A Expired - Fee Related CN104662510B (zh) 2012-04-04 2012-04-04 企业级数据元素检查系统和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201711057610.5A Expired - Fee Related CN107657065B (zh) 2012-04-04 2012-04-04 包括计算机可读介质的系统和企业级数据元素检查的方法

Country Status (4)

Country Link
EP (1) EP2834733A4 (zh)
CN (2) CN107657065B (zh)
IN (1) IN2014DN08750A (zh)
WO (1) WO2013150507A2 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9251363B2 (en) 2013-02-20 2016-02-02 Varonis Systems, Inc. Systems and methodologies for controlling access to a file system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6574630B1 (en) * 2000-01-28 2003-06-03 Ccbn.Com, Inc. Investor relations event notification system and method
US20080115076A1 (en) * 2000-02-22 2008-05-15 Metacarta, Inc. Query parser method
US7596571B2 (en) * 2004-06-30 2009-09-29 Technorati, Inc. Ecosystem method of aggregation and search and related techniques
US7653836B1 (en) * 2005-06-10 2010-01-26 American Megatrends, Inc Logging metadata modifications in a data storage system
US20110060916A1 (en) * 2009-09-09 2011-03-10 Yakov Faitelson Data management utilizing access and content information

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7444655B2 (en) * 2002-06-11 2008-10-28 Microsoft Corporation Anonymous aggregated data collection
US20040123183A1 (en) * 2002-12-23 2004-06-24 Ashutosh Tripathi Method and apparatus for recovering from a failure in a distributed event notification system
JP4794130B2 (ja) * 2004-01-20 2011-10-19 ルネサスエレクトロニクス株式会社 マスクパターンデータ自動補正方法及びそのプログラム
US7506379B2 (en) * 2004-11-04 2009-03-17 International Business Machines Corporation Method and system for storage-based intrusion detection and recovery
US7606801B2 (en) 2005-06-07 2009-10-20 Varonis Inc. Automatic management of storage access control
US8578507B2 (en) 2009-09-09 2013-11-05 Varonis Systems, Inc. Access permissions entitlement review
US9870480B2 (en) 2010-05-27 2018-01-16 Varonis Systems, Inc. Automatic removal of global user security groups
CN101964732B (zh) * 2010-09-02 2012-08-15 海信集团有限公司 计算丢包率的方法及装置、控制网络传输的方法及装置
CN102436556B (zh) * 2012-01-09 2015-03-25 国电南瑞科技股份有限公司 轨道交通事故反演系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6574630B1 (en) * 2000-01-28 2003-06-03 Ccbn.Com, Inc. Investor relations event notification system and method
US20080115076A1 (en) * 2000-02-22 2008-05-15 Metacarta, Inc. Query parser method
US7596571B2 (en) * 2004-06-30 2009-09-29 Technorati, Inc. Ecosystem method of aggregation and search and related techniques
US7653836B1 (en) * 2005-06-10 2010-01-26 American Megatrends, Inc Logging metadata modifications in a data storage system
US20110060916A1 (en) * 2009-09-09 2011-03-10 Yakov Faitelson Data management utilizing access and content information

Also Published As

Publication number Publication date
EP2834733A4 (en) 2016-06-22
CN104662510B (zh) 2017-11-28
CN107657065B (zh) 2021-05-25
WO2013150507A3 (en) 2015-06-18
EP2834733A2 (en) 2015-02-11
WO2013150507A2 (en) 2013-10-10
IN2014DN08750A (zh) 2015-05-22
CN107657065A (zh) 2018-02-02

Similar Documents

Publication Publication Date Title
CN104639374B (zh) 一种应用程序部署管理系统
CN110134674B (zh) 一种货币信贷大数据监测分析系统
CN101252471B (zh) 一种分布式自动化测试系统及其方法
US20080028048A1 (en) System and method for server configuration control and management
CN104717094A (zh) 管理服务器和管理服务器的控制方法
CN103401704A (zh) 一种分布式日志采集服务器的实现方案
US10152606B2 (en) Enterprise level data element review systems and methodologies
CN1293473C (zh) 系统进程的保护方法
CN111798655B (zh) 一种适用于电力物联网台区的运行数据分钟级采集方法
CN108304293A (zh) 一种基于大数据技术的软件系统监控方法
CN102916830A (zh) 一种资源服务优化配置容错管理实现系统
AU1591201A (en) Systems and methods for collecting, storing, and analyzing database statistics
EP3996293A1 (en) Optimization system of heterogeneous low earth orbit multi-use spacecraft
CN104662510A (zh) 企业级数据元素检查系统和方法
CN109783310A (zh) It设备的多维动态安全监控方法及其监控装置
CN101980474B (zh) Idc网管监控平台
CN101470889A (zh) 脐血干细胞管理系统
US9047757B2 (en) Systems and methods for remotely controlling an advanced metering infrastructure
CN102346698A (zh) 一种时间程序管理方法、服务器及系统
CN116841980A (zh) 一种银行数据处理系统
CN101651564A (zh) 一种许可证检测方法、分布式网管系统和服务器
CN111311079A (zh) 一种大用户综合用能服务系统
CN101404590B (zh) 下级网管向上级网管上报数据的方法和网管设备
CN102346666A (zh) 捕获和处理在erp临时阶段中生成的数据
CN106095656B (zh) 一种云备份与分析方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20171128

CF01 Termination of patent right due to non-payment of annual fee