CN101641695A - 资源接入过滤系统及供与资源接入过滤系统一起使用的数据库结构 - Google Patents

资源接入过滤系统及供与资源接入过滤系统一起使用的数据库结构 Download PDF

Info

Publication number
CN101641695A
CN101641695A CN200880008487A CN200880008487A CN101641695A CN 101641695 A CN101641695 A CN 101641695A CN 200880008487 A CN200880008487 A CN 200880008487A CN 200880008487 A CN200880008487 A CN 200880008487A CN 101641695 A CN101641695 A CN 101641695A
Authority
CN
China
Prior art keywords
hash
resource
database structure
data section
page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200880008487A
Other languages
English (en)
Other versions
CN101641695B (zh
Inventor
阿拉斯泰尔·纳什
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Forcepoint UK Ltd
Original Assignee
Websense UK Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Websense UK Ltd filed Critical Websense UK Ltd
Publication of CN101641695A publication Critical patent/CN101641695A/zh
Application granted granted Critical
Publication of CN101641695B publication Critical patent/CN101641695B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/31Indexing; Data structures therefor; Storage structures
    • G06F16/316Indexing structures
    • G06F16/325Hash tables
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/954Navigation, e.g. using categorised browsing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明揭示一种数据库结构(400),其存储表示计算系统中例如URL的多个资源识别符(200)的数据。所述URL(200)各自与相应类别代码(310)相关联。对每一资源识别符(200)进行散列以提供被划分为至少第一和第二散列部分(301、302)的散列值(300)。所述第一散列部分(301)给主散列阵列(410)加索引以选择主数据区段(420)中保持一组所述第二散列部分(302)及所述相应类别代码(310)的主数据块(421)。出于安全性及紧致性起见,任选地进一步划分所述散列值(300)以提供被丢弃且不被用来接入所述数据库(400)的第三散列部分(303)。本发明还描述一种数据库产生设备、一种数据库搜索设备及一种过滤设备、一种形成数据库结构的方法及一种从数据库结构中检索数据的方法及一种上面记录有数据库结构的计算机可读存储媒体中的每一者。

Description

资源接入过滤系统及供与资源接入过滤系统一起使用的数据库结构
技术领域
本发明大体来说涉及一种资源接入过滤系统,其参照存储表示例如URL的多个唯一资源识别符的数据的数据库结构来控制对计算网络的资源的接入。本发明还涉及一种用以形成此数据库结构的产生器设备,且涉及一种用以使用此数据库结构来控制对计算系统中的资源的接入的过滤器设备。此外,本发明还涉及一种形成数据库结构的方法及一种从数据库结构检索数据的方法,且涉及一种上面记录有数据库结构的计算机可读存储媒体。
背景技术
因特网的一个较大好处是,成千上万的用户可接入万维网的共享信息及通信。然而,公开接入所有形式的信息或通信并不总是适当的。例如,许多学校及企业为其学生及雇员提供因特网接入。学校或企业至少部分地负责散播所述组织内的信息且通常有义务防止种族歧视、性别歧视或其它攻击性材料的传播。这只是其中强烈需要一种对因特网接入进行控制的方法的一个实例性情形。另一实例为本地环境,在这种环境下父母可希望防止其子女接入面向成人的网页。其它实例包含例如图书馆、网吧或公共因特网亭等公共场所。
相关技术中可获得用以监视或控制对因特网的接入的数个系统。例如,US5,884,033(杜瓦尔(Duvall)等人)揭示一种基于客户端的过滤系统,其将传入及/或传出消息的若干部分与数据库中所存储的过滤信息进行比较并确定适当的行动,例如是允许还是屏蔽消息的传输。更新服务器可经由因特网被接入以便更新数据库。
US2003/0088577A1(塞恩胡佛(Thurnhofer)等人)使用有向图形式揭示一种产生具有相对较大数目的数据项的数据库的方法,所述数据项被分为相对较小数目的类别。此数据库经特定研发以用于紧致且高效地存储大量URL及相关联的类别代码。然而,必须在每次修改时完全重建数据库以添加新的URL或修订所述分类。
相关技术的过滤系统及数据库结构遇到各种不同的需求。例如,通常要求此类数据库结构相对紧致以使得数据库的大小最小化。然而,系统还需要以高速度接入数据库结构。此外,需要以频繁的间隔更新数据库。另外,需要保护数据库的安全。由本发明例示性实施例中的某些实施例来解决相关技术中的这些及其它问题且现在将对其加以更详细描述。
发明内容
根据本发明,提供一种资源接入过滤系统、一种产生器设备、一种过滤器设备、一种形成数据库结构的方法、一种从数据库结构检索数据的方法及一种上面记录有数据库结构的计算机可读存储媒体,如所附权利要求书中所述。根据所附权利要求书及随后的说明,本发明的优选特征将显而易见。
在本发明的一个方面中,提供一种资源接入过滤系统,其包括产生器单元、客户端单元及过滤器单元。所述产生器单元经布置以形成数据库结构且至少包括分类单元,所述分类单元经布置以提供:多个资源识别符,其各自与相应的类别代码相关联;散列单元,其经布置以对所述多个识别符中的每一者进行散列以提供散列值并将所述散列值划分为至少第一和第二散列部分;及存储单元,其经布置以输出至少包含散列阵列及主数据区段的数据库结构,其中所述主数据区段包括在多个主数据块之间划分的第二散列部分及相应类别代码,且所述散列阵列包括若干第一散列部分,其各自与主数据区段中的若干主数据块中的相应一者的指针相关联。所述客户端单元经布置以参照需求资源识别符请求对资源的接入。合适地,所述资源是计算网络内的资源,且方便地,所述资源由包含主机部分且任选地包含其它部分(例如页面部分)的URL识别。所述过滤器单元经布置以参照根据所需求的资源识别符从数据库结构获得的类别代码控制对资源的接入,其中所述过滤器单元包括:通信单元,其经布置以获得与客户端装置所做出的资源接入请求相关的所需求资源识别符;数据库接入单元,其经布置以通过以下操作从数据库结构返回适合于所需求资源识别符的类别代码:基于资源识别符产生搜索散列值并将所述搜索散列值划分为至少第一和第二散列部分、通过使用第一散列部分查阅散列阵列来识别数据库结构的主数据区段中的相应主数据块及根据第二散列部分从相应的主数据块中检索类别代码;及控制单元,其经布置以确定由客户端装置参照数据库接入单元所获得的类别代码而做出的资源接入请求相关的控制动作。
在一个实施例中,所述散列单元经布置以还将所述散列值中的每一者划分为第三散列部分,接着丢弃所述第三散列部分以改善数据库结构的安全性。所述数据库接入单元同样经布置以将所需求的资源识别符划分为对应的第一、第二及第三散列部分,其中仅采用第一和第二散列部分来接入数据库结构。
在一个实施例中,所述存储单元进一步经布置以提供页面数据区段及/或冲突数据区段以增强数据库结构的准确性及/或粒度。
在一个实施例中,所述过滤器单元至少包括较快接入的主要存储装置及较慢接入的辅助存储装置,其仅使用主要存储装置在第一基于存储器模式中操作以便较快速接入数据库结构,或在第二共享接入模式中操作,其中主要存储装置与辅助存储装置协作使用从而减少主要存储装置中的存储器使用同时维持对数据库结构的可接受实时接入速度。
在一个实施例中,所述系统进一步包括更新器单元,所述更新器单元经布置以产生用以更新数据库结构的更新结构。所述更新结构允许数据库结构的递增更新且例示性实施例经布置以在数据库结构仍在使用中的同时更新所述数据库结构。
本发明其它方面特定来说涉及作为本文中所描述的系统的单独元件的产生器单元、过滤器单元及更新器单元。
本发明的又一方面提供一种上面记录有数据库结构的计算机可读存储媒体,所述数据库结构存储表示各自与相应的类别代码相关联的多个资源识别符的数据,所述数据库结构包括:主数据区段,其具有多个主数据块,其中所述多个主数据块中的每一者包括多个第二散列部分且所述多个第二散列部分中的每一者均与相应的类别代码相关联;及主散列阵列,其包括多个第一散列部分,其中所述第一散列部分中的每一者均与所述主数据区段中的所述多个主数据块中的相应一者的参考指针相关联;其中所述第一散列部分及所述第二散列部分中的每一者从自所述多个资源识别符中的相应一者导出的散列值被划分。
本发明又一方面提供一种形成数据库结构的方法,其包括以下计算机实施的步骤:提供各自与相应的类别代码相关联的多个资源识别符;对所述多个资源识别符中的每一者进行散列以提供相应的散列值并将所述相应的散列值划分为至少第一散列部分及第二散列部分;及将至少主散列阵列及主数据区段存储在数据库结构中,其中所述主数据区段包括各自包括与相应的类别代码相关联的一组第二散列部分的多个主数据块,且所述主散列阵列包括各自与数据区段中的相应主数据块相关联的若干第一散列部分。
本发明又一方面提供一种从数据库结构检索数据的方法,其包括以下计算机实施的步骤:接收识别计算系统中的资源的所需求资源识别符;基于所述资源识别符提供散列值并将所述散列值划分为至少第一和第二散列部分;及通过使用所述第一散列部分查阅散列阵列来识别数据库结构的主数据区段中的主数据块;及根据所述第二散列部分从所识别的主数据块中检索类别代码。
本发明的至少某些实施例可仅使用专用硬件来构造,本文中所使用的例如“模块”或“单元”等术语可包含但不限于执行特定任务的例如现场可编程门阵列(FPGA)或专用集成电路(ASIC)等硬件装置。或者,本发明的元件可经配置以驻留在可寻址存储媒体上且可经配置以在一个或一个以上处理器上执行。因此,在某些实施例中,本发明的功能性元件可包含(举例来说)例如软件组件、面向对象的软件组件、类别组件及任务组件等组件、过程、功能、属性、程序、子例程、程序代码的若干片段、驱动器、固件、微码、电路、数据、数据库、数据结构、表格、阵列及变量。此外,尽管已参照下文论述的组件、模块及单元描述了优选实施例,但在替代实施例中可将此类功能性元件组合为较少元件或分为若干额外元件。
附图说明
为了更好地了解本发明,并显示如何实现本发明的实施例,现在将以举例方式参照附图,附图中:
图1是如本发明第一实例性实施例中采用的系统及设备的示意性概要图;
图2是如根据本发明第二实例性实施例中采用的系统及设备的示意性概要图;
图3是如本发明实例性实施例中采用的过滤器单元的示意性概要图;
图4是如本发明实例性实施例中采用的产生器设备的示意性概要图;
图5显示由图4的产生器设备执行的一系列数据操作;
图6是如本发明实施例中采用的例示性数据库结构的示意性概要图;
图7更详细地显示关于主散列阵列及主数据区段的例示性数据库结构;
图8是产生所述数据库结构的方法的示意性概要图;
图9显示用于从适合于所需求RUL的数据库结构提取类别代码的优选机构;
图10更详细地显示关于冲突数据区段的例示性数据库结构;
图11更详细地显示关于页面数据区段的例示性数据库结构;
图12更详细地显示关于存储器接入模式及共享接入模式的过滤器单元;
图13是所采用以更新例示性数据库结构的系统及设备的示意性概要图;
图14是如本发明实施例中采用的例示性更新数据库结构的示意性概要图;
图15更详细地显示关于主更新区段的例示性更新数据库结构;
图16更详细地显示关于页面更新区段的例示性更新数据库结构;且
图17更详细地显示关于冲突更新区段的例示性更新数据库结构。
具体实施方式
参照图1,本发明第一实例性实施例中所采用的系统及设备可适用于(例如)小型公司网或家庭本地环境。在此第一实例性实施例中,一个或一个以上客户端机10通过客户端网关12及因特网服务提供商(ISP)21连接到因特网20。每一客户端机10均提供适合于人类用户的输入及输出接口功能,其合适地包含提供图形用户接口(GUI)的显示器屏幕及用户输入单元,例如控制键、鼠标及其它合适的装置。如图1中所示,在一个实施例中,客户端机10为计算平台,例如台式计算机、膝上型计算机或个人数字助理(PDA)。在另一实施例中,客户端机10为功能特定的因特网设备,例如web电视。在第三实例中,客户端机10为公共因特网信息亭。客户端机10的许多其它特定形式也可适用于本发明实施例。
客户端机10中的每一者均提供使用URL来获得资源的客户端应用程序。在此实例中,内容服务器30可经由因特网20来接入且提供例如网页32的资源。合适地,客户端机10提供web浏览器应用程序并做出从内容服务器30获得网页32的HTTP请求。在此实例中,网页32包括适当格式(例如HTML、SGML、PostScript或RTF,以及其它格式)的文本及/或图形数据。然而,应了解,本发明还可适用于使用URL的计算机系统或计算机网络中提供的许多其它资源,例如FTP下的文件传送、到远程登录服务器的连接或因特网中继交谈(IRC),以及其它资源。
客户端网关12合适地包含调制解调器或路由器,例如模拟、ISDN、ADSL或SDSL调制解调器,其经由简易老式电话系统(POTS)或其它有线或光学网络连接到ISP 21以提供到因特网20的网络层连接。作为另一实例,客户端网关12通过无线网络或蜂窝式移动网络(例如GSM或GPRS)连接到因特网20。在又一些实施例中,客户端网关12通过例如LAN或WAN等中间网络或任选地经由虚拟私人网络(VPN)连接到因特网20。在一个实施例中,客户端机10及客户端网关12形成为物理地分开的装置且通过任何适当的有线或无线链路来通信。在其它实施例中,客户端网关12集成在客户端机10内。
如图1中所示,过滤器单元40经布置以保持存储URL及相关联类别代码的数据库结构400。方便地,过滤器单元40集成在客户端网关12内或集成在客户端机10的一个或一个以上客户端机内。图1还显示产生及更新数据库结构400的数据库产生器设备及数据库更新器设备50。数据库结构400从便携式数据存储媒体(例如光盘)或通过从通信网络(例如经由因特网20)下载而合适地提供到过滤器单元40。
图2是如本发明第二实例性实施例中采用的系统及设备的示意性概要图。图2的实例是如商业写字楼及其它大的组织中所使用的计算网络的典型。此第二实例提供通过局域网(LAN)11而耦合的一个或一个以上客户端机10。通常,LAN 11包含(例如)通过ISP(未显示)耦合到因特网20的一个或一个以上代理服务器14。使用位于LAN内或来自LAN外部(例如经由因特网20)的URL来接入资源。耦合到LAN 11的服务器16提供过滤器单元40且保持数据库结构400。对于上文图1,数据库结构400由数据库产生器设备50产生且(例如)经由因特网20被提供给过滤器单元40。所述产生器设备还充当数据库更新器设备50,其准备好发送给过滤器单元以更新数据库结构400的更新包。图2中所示的实例性网络排印存在所属领域的技术人员将熟悉的许多特定变型。例如,在又一实施例中,过滤器单元40、数据库更新器设备及数据库结构400位于LAN 11上游的因特网云20中且作为远离LAN 11的按需管理的服务而被接入。
在图1及2的实例性实施例中,过滤器单元40经布置以执行各种过滤功能中的一种,其可包含被动地监视并记录URL以供后来进行检查、分析或报告,或执行主动控制功能,例如确定是否将允许客户端机10接入所请求的资源。过滤器单元40经布置以通过将URL置于若干类别中、通过查阅数据库结构400来执行此类过滤功能。
图3是过滤器单元40的更详细图式。过滤器单元40包括通信单元41、数据库接入单元42及控制单元43。通信单元41(例如)通过截获由客户端机10做出的HTTP请求获得与资源接入请求相关的URL来接入资源服务器30上的网页32。或者,在系统的别处截获资源接入请求且对过滤器单元40做出为所需求RUL提供类别代码的请求。数据库接入单元42询问数据库结构400以确定所述URL的类别。任选地,控制单元43参考URL及所确定的类别代码来执行过滤操作,例如主动控制功能或被动记录功能。通信单元41提供适当的输出,例如向客户端机10发送拒绝接入所请求URL的HTTP回复,或向资源服务器30转发可允许资源接入请求,或向所需求的URL返回相关的类别代码。
在简单的实例中,过滤器单元40将URL置于两个类别中的一者中,例如“允许”或“拒绝”。在更为复杂的实施例中,以较大的粒度将URL分类。在本实例中,数据库结构400将每一URL置于约40个类别中的一者中。所述实例性实施例提供8个核心类别,例如“成人/性爱”、“犯罪”、“毒品、酒精、烟草”、“暴力”或“武器”,以及32个与生产力相关的类别,例如“广告”、“游戏”、“爱好及娱乐”或“儿童网站”。提供此预定组类别允许执行更为复杂的基于规则的控制或记录功能。例如,当对所述核心类别中的任何核心类别做出请求或做出在特定时间屏蔽选定的生产力类别且仅允许在(例如)午餐时间或工作之外的时间接入的请求时,使用规则来警告管理员。为迎合所有可发生的事件,优选类别还可包含“未知”或“未找到”选项。用于过滤资源接入请求(例如被动监视功能或主动屏蔽功能)的特定下游过滤动作可采取任何合适的形式。
图4是产生数据库结构400的产生器设备50的示意性概要图。分类单元51提供URL及相关联类别代码的列表。散列单元52对既定的URL进行散列以提供URL散列。存储单元53将所述URL的至少一部分连同所述URL的类别代码一起存储到数据库400中。
图5显示由产生器设备50在产生数据库结构400时执行的一系列数据操作。
首先,图5显示资源识别符200,例如如RFC3986中所定义的统一资源识别符(URI)。概括地说,URI 200是数字串,或更通常地,RUI 200是用以识别网络内的资源的文数串。本发明可适用于许多特定的环境且可适用于许多不同特定形式的资源识别符。为了解释及了解本发明的基本原理,本文中描述的实例性实施例与接入计算机网络上的资源有关。大多数当前可用的计算机网络为采用统一资源定位符(URL)来识别资源的基于因特网协议(IP)的网络。URL是众所周知的且将为所属领域的技术人员所熟知,例如根据RFC1738。在图5中,实例性URL 200包含主机部分202及页面部分204。主机部分202识别特定的主机(例如“www.host.com”),同时页面部分204识别与特定页面(例如“/directory/page.html”)相关的路径。作为另一特定实例,可将主机部分202表达为通常采用四个八位字节点的十进制格式的IPv4地址。作为另一实例,主机部分202为IPv6地址。
其次,图5显示通过借助于散列算法对资源识别符(在此情况下为URL 200)进行散列而产生的URL散列值300。实例性实施例采用通常可用的散列方案(也定义为消息摘要算法),例如MD4或MD5。本文中论述的实例性实施例使用MD4,其通常比MD5快约12%。尽管不如MD5安全,但本文中所论述的数据库结构仍允许安全地使用较快的MD4。在图4中所图解说明的实例中,使用MD4散列算法对任意长度的表示URL主机部分202的文数串进行散列以提供固定长度的16字节URL散列值300。根据数据库结构400中的记录数目合适地选择散列值300的长度。在较大数据库中,散列长度扩展到(例如)24或32字节以使得散列300具有为两个不同URL串200产生相同的散列值300(散列冲突)的最小可能性。
再次,图5显示被划分为至少第一和第二部分301、302且任选地还划分为第三部分303的URL散列300。第一部分301方便地是最低有效字节或散列300的若干字节,例如如图5中所示的最低两个字节0及1。第二部分302方便地为一群组次高有效字节,其在此情况下为标记为2到7的六个字节。第三部分303方便地为一群组最高有效字节,其在此情况下为字节8到15。对URL散列的许多其它划分也是可能的。保留URL散列300的第一和第二部分301、302以施加到下文将更详细描述的数据库结构400,同时丢弃URL散列300的第三部分303。
图6是根据本发明实例性实施例的数据库结构400的示意性结构概要。数据库结构400包含主散列阵列410及主数据区段420、冲突数据区段430、页面数据区段440、类别数据区段450及文件标头460。
图7更详细地显示关于主散列阵列410及主数据区段420的例示性数据库结构400。后面将描述数据库的其它组成部分。
主散列阵列410是用以给数据库结构加索引的散列表,其具有与URL散列值300的第一散列部分301一致的条目0到n。对于2字节索引来说,n为65,536个条目。散列表410中的每一条目411合适地借助于指针412来识别主数据区段420中的数据块。长度值413给出数据块的长度。在实例性实施例中,所述数据块并非都是相同大小。指针412表示从主数据区段420的开始处的偏移值(以字节计)。偏移412与长度值413一起从主数据区段420选择数据块421。
主数据区段420中的每一数据块421存储多个记录422。每一记录422包括URL散列值300的对应于URL 200的特定主机部分202的第二散列部分302。同样,每一记录422包括相关URL的对应类别代码310。在此情况下,类别代码310是适用于相关URL 200的根或主机部分202的根类别代码。
图8是产生数据库结构400的方法的示意性概要图。
在步骤801处对URL 200进行散列。在步骤802处,将URL散列划分为至少两个组成部分。将所述散列的第一组成部分存储在数据库结构中。如上文论述,在步骤803及804处,第一部分301与主散列阵列410相关,且第二部分存储在主数据区段420的相关数据块421中。在步骤805处丢弃所述散列的第二组成部分,也就是第三部分303。
图9显示用于从适合于所需求URL的数据库结构提取类别代码的优选机构。
在步骤901处对所需求的URL 200进行散列以提供URL散列值300。特定来说,对URL 200的主机部分202进行散列以提供固定长度的16字节散列值300。在步骤902处,将URL散列值划分为第一、第二及第三部分301、302、303。在步骤903处,使用第一URL散列部分301(在此情况下为最低有效两个字节)给主散列阵列410加索引,从而合适地检索适当的偏移412及长度值413。在步骤904中,使用偏移412及长度413值从主数据阵列420中选择数据块421。在步骤905处使用第二散列部分802搜索选定的数据块421。方便地,所述数据块以数字方式排序,且所述搜索为二进制速查或类似技术。二进制速查是一种用于搜索数字次序列表的快速及简单机制。每一所存储的第二散列部分302均为已知大小的数字值,在此情况下为6字节。使用简单的整数比较来搜索所述散列值,这比用以比较完整URL 200或URL主机部分200的文数串更快。
在步骤906处,第二散列部分302在所搜索的数据块421中的成功匹配选择特定的记录422且允许检索对应的类别代码310。所检索的类别代码310是适合于所需求的URL 200的类别代码。否则,返回“未找到”条件。
图10显示与冲突数据区段430相关的数据库结构400的进一步细节。
即便使用优选的16字节MD4散列算法,两个不同URL 200将散列到相同值的可能性也是小的。同样,由于丢弃了第三散列部分303,存在两个不同URL 200将散列到相同部分值301、302(即具有相同的较低8字节)的可能性。在实践中,此类巧合是极为罕见的。然而,在存储散列到与先前存储的第一URL相同的值的第二URL时检测到巧合的情况下,则采用冲突数据区段430。
如图10中所示,使用标记425将主数据区段420中的适当条目422标记为无效,例如通过写入预定值来代替通常的类别代码310。标记425显示冲突数据区段430将要被查阅。
冲突数据区段430存储第一和第二URL的全散列值300。在此实例性实施例中,在较好的散列方案(在此情况下为MD5)下确定全散列值中的每一者以进一步减小全散列值中的冲突的可能性。所述冲突数据区段还存储这些URL中的每一者的类别代码310。
在本方案中,先前未遇到的第二URL有可能将与所存储的第一URL冲突,从而导致针对第二URL返回不准确的类别310。当此发生时,通过将第一URL及第二URL两者移动到冲突列表430来更新数据库结构400以继而包含第二URL。
图11显示关于页面数据区段440的实例性数据库结构400的进一步细节。
页面数据区段440含有从主机202分配到相关的个别页面204的类别代码。为每一主机202提供根类别代码,且任选地为与特定主机202相关联的页面204中的某些或所有页面提供页面类别代码。例如,为主机域“www.bbc.co.uk”分配类别,例如“37”,同时为“www.bbc.co.uk/sport.html”处的域的特定页面分配另一代码,例如“38”。
参照图11,主数据区段420中的每一条目422进一步包含给页面数据区段404中的页面数据块444加索引的页面索引426。使用默认值(例如“0”)来显示用于特定记录422的页面数据区段中没有页面。
在页面数据区段404中,通过索引将所述页面分组且每一页面均作为页面串441(例如“/体育”、“/天气”等等)而被保持。在此实例中,每一页面串411均具有相关联的页面类别代码311。以文数方式将所述页面串排序以启用对页面数据块444的依序搜索。每一页面块均可为任何长度且以定界结束字符(例如零)合适地结束。
再次参照图6,类别数据区段450含有类别代码及相关文本类别名称的列表。类别数据区段450可用于解译数据库结构中所存储的类别代码。合适地,类别数据区段450以各种不同语言提供类别名称,从而根据本地优先级来显示类别名称。文件标头区段460含有数据库结构文件的全局信息,例如文件名称。合适地,文件标头460识别所述文件中的其它数据区段410-450的位置。此外,所述文件标头含有有效数据,例如校验和。
图12结合如上文论述的实例性数据库结构400显示图3的过滤单元40的进一步细节。如图12中所示,过滤单元40经布置以接入至少第一数据存储单元44及第二数据存储单元45,所述第一数据存储单元及所述第二数据存储单元能够保持数据库结构400并向数据库接入单元42提供数据。此时,数据存储单元44、45包含至少一种形式的快速接入主要存储装置44(例如随机接入固态存储器),及至少一种形式的慢速接入大容量长期辅助存储装置45(例如磁盘驱动器或光盘存储装置)。
在第一基于存储器模式中,将整个数据库结构400加载到存储器44的较快接入的存储装置中。合适地,通过将主散列阵列410中的偏移412中的每一者转换为直接或间接地参照主数据区段420的数据块421现在被保持的存储器地址位置的若干存储器位置指针来在存储器44中初始化数据库结构400。将数据库结构整个地保持在工作中的存储器44中使得数据库结构400的查找速度最大化。然而,即使数据库结构400相对紧致,仍存在所需存储器的量的减少。在许多实践情形下,例如对于具有有限的存储容量的装置,需要使得存储面积最小化,同时维持用以从数据库结构检索数据的足够接入时间。例如,例如公共因特网信息亭或手持便携式装置(例如PDA或移动电话)的设备通常具有相对小的空闲存储器。
如图12中另外所示,在第二共享接入模式中仅将数据库结构400的若干选定组成部分加载到存储器44中。在此共享接入模式中,将主散列阵列410加载到存储器44中,同时将主数据区段420、页面数据区段440及冲突数据区段430全部保留在辅助存储装置45上。
在初始化数据库结构时,主散列阵列410中的偏移412作为从数据库结构文件400的开始处的偏移被而转换并存储在存储器44中。数据块421最初并没有加载到存储器44中。而是,当执行查找时,从存储器44中的主散列阵列410获得经转换偏移412并使用所述偏移仅从主数据区段420加载所需的数据块421。一旦完成查找,所载入的数据即被释放。类似地,当采用页面数据区段430时,对页面索引表432的页面级接入在需要时加载所需的页面数据块444。在优选实施例中,还将页面数据区段430的页面索引432加载到存储器44中。
此共享接入模式显著地减小了存储器占地面积。此外,数据库结构经布置以最优化基于磁盘的检索。偏移412方便地与文件的开始相关且将主数据区段420置于所述文件的早先组成部分有助于减少磁盘寻找时间。此外,主数据区段420及页面数据区段440紧密地定位以减少磁头移动。
用以存储URL及相关联的类别代码的所描述的数据库结构在本质上是相对大的数据组。例如,可需要数据库结构保持数以百万计的URL。作为实践实例,数据库结构含有约550万个主主机202或IP地址。同样,页面数据区段440列出约500,000个页面。然而,数据库结构的实例性实施例仅需要约65Mb的存储装置。因此,所描述的数据库结构400跨越计算机网络传输时较不昂贵,且存储起来也较不昂贵。
所述优选数据库结构是紧致的,同时维持迅速的接入。在上文论述的实例性存储器模式中,所述数据库结构可以域级分类以每秒约70,000次接入来被接入。在所述共享模式中,将约为仅2Mb的数据保持在存储器中,其中剩余部分(即,63Mb左右)保持在辅助存储装置(例如硬盘)上。每一分类仅需要三次磁盘读取操作以返回类别代码。大多数分类仅花费一次或两次磁盘读取。根级分类(域级)仅花费一次磁盘读取。实例性实施例中的共享模式每秒钟处置25,000以上分类。
在许多情况下,需要频繁地更新数据库结构以(例如)添加新的URL及类别代码,或修订现有的数据。通常每天需要更新至少一次。
图13显示用以传输数据库更新结构500的实例性系统,所述数据库更新结构用于递增地更新数据库结构400。
产生器单元50包含将数据库结构400a的当前版本与所需的新版本400b进行比较以产生更新结构500的更新器单元54。接着经由例如因特网20的通信网络将更新结构500传输到过滤器单元40。仅发送递增更新500显著地减少了通信网络20中的带宽消耗。任选地,压缩更新结构500以在传输期间进一步压紧其大小。
过滤器单元40将更新结构500施加到数据库结构400a的当前拷贝以产生并入有所需的更新的所需的新数据库结构400b,如现在将更详细解释。
图14显示更新结构500的概略图,其包含文件标头510、标头更新区段560、主更新区段520、页面更新区段540、冲突更新区段530及类别更新区段550。
文件标头510含有与更新文件500相关的标头信息,例如日期、版本、文件大小及文件校验和。
标头更新区段560含有用以完全取代当前数据库结构400a的标头区段460的数据。标头460含有所述结构中的其它区段的偏移及大小(例如主数据区段420的偏移及大小)。发送整个新标头460由于避免了在完成更新之后重新计算区段偏移及大小而减小了过滤器单元40处的工作负载。
类别更新区段550含有类别数据区段460的完全替换。此数据相对频繁地改变,且被整体地重新传输。
图15更详细地显示主更新区段520。主更新区段520含有各自后面有一个或一个以上参数522的更新命令521的列表。所述命令合适地表达为预定代码(例如0x01、0x02及0x03)且用于在主数据区段420中插入、修改或删除记录422。所述命令经排序以使得命令521的次序对应于记录422的次序,即根据散列部分301、302。
插入命令指令过滤器单元40在数据库结构的主数据区段420中由位置参数522识别的位置处插入新记录422。位置参数522给出相对于将要执行所指令命令的先前命令位置(或默认开始位置)的偏移位置。因此,对命令521的依序排序允许过滤器单元40步进通过数据库结构且做出适当的次序上的改变。插入命令还提供第二散列部分302、类别代码(CC)310及(如果需要)页面级索引(PLI)315的参数522以完成新记录422。还提供第一散列部分301,且由过滤器单元40重新计算主散列阵列410以计及新记录422。
修改命令指令过滤器单元40修改主数据区段420中的现有记录422。在此情况下,参数522提供将要被写入到数据库结构中的新数据以取代相关记录422的当前数据。在此实例中,参数522提供新类别代码(CC)310及新页面级索引(PLI)315。
删除命令指令过滤器单元40从数据库结构的如位置参数522所识别的主数据区段420中删除记录422。还给出第一散列部分301,以使得过滤器单元40重新计算主散列阵列410以虑及现在删除的记录422。
图16显示支持具有适当参数542的插入、修改及删除命令541的页面更新区段540的更多细节,所述页面更新区段类似于上文论述的主更新区段520。页面命令541由第一散列部分301且接着由页面串441排序。
页面插入命令指令过滤器单元40在数据库结构的页面数据区段440中插入新页面块444,或在已经存在的页面块444中插入新页面串441及页面类别代码331。当添加整个新页面块444或“0”以添加页面条目时,第一参数522给出页面级索引(PLI)426。第二LGTH参数给出随后的第三参数的长度(例如以字节计)。第三参数为新页面块434提供一组页面串441及页面类别代码311,或者为所插入页给出页面串441及页面类别代码311。位置参数522给出相对于将要执行所指令命令的先前命令位置(或默认开始位置)的偏移位置。
页面修改命令521指令过滤器单元40修改具有SZE参数522的页面块大小,或者修改页面数据区段440中的现有页面的页面类别代码(PCC)311。
页面删除命令指令过滤器单元40从通过位置参数522识别的页面数据区段440中删除特定页面串441及相关页面类别代码311。或者,在第一参数522中给出页面级索引426且删除命令删除整个页面块444。
图17显示支持具有适当参数532的冲突的插入、修改及删除命令531的冲突更新区段530的更多细节,所述冲突更新区段类似于上文论述的主更新区段520及页面更新区段540。冲突命令531由全散列值300排序。
冲突插入命令指令过滤器单元40在具有类别代码300的冲突数据区段430中插入新的全散列值300。在相关根URL链接到页面级数据处提供页面级索引426。位置参数522给出相对于在其处将要执行所指令命令的先前命令位置(或默认开始位置)的偏移位置。冲突修改命令521指令过滤器单元40在所识别的位置处修改类别代码310或页面级索引426。冲突删除命令指令过滤器单元40删除冲突数据区段430中的特定条目并给出第一散列值301以更新主散列阵列410。
再次参照图13,更新结构500施加到现有的数据库400a以产生经更新数据库400b。为在更新数据库结构400时使停机时间最小化,更新结构500允许以小组块更新数据库,所述小组块各自从现有结构400a复制到经修改结构400b,此特定来说是因为对命令的排序。在更新期间重新计算主散列阵列410以参照所述结构内的新位置。方便地,将新文件400b的校验和值与更新标头510中给出的校验和进行比较确认已正确地执行更新。一旦更新完成,即合适地以新文件400b复写旧文件400a。
在大多数情况下,使用数据库结构对URL的分类甚至可在更新期间继续进行。然而,在具有有限存储器的装置中,使用数据库结构的分类被合适地完全暂停一小段时间,以允许所述存储器用于依次更新所述结构的所述组块中的每一者。
所描述的数据库结构具有许多优点,如上文所论述或如所属领域的技术人员通过实施本发明的实例性实施例将了解。
在某些例示性实施例中,由于难以反转引擎,数据库结构的安全得以改善。将数据编译到数据库中会花费高度的技术及努力,且期望所述数据库反转引擎应相对困难,同时仍易于合理使用。由于仅将URL散列301、302的一部分进行排序,因此不可能从所存储数据获得原始URL 200。
本文中论述的数据库结构400是相对紧致的,其使得临时存储器(例如RAM)中或永久存储媒体(例如硬盘)上的存储空间最小化。此外,数据库结构提供快速查找,以便可从所述数据库中快速地检索与特定记录相关的数据。另外,通过(例如)提供递增的日常更新来容易地更新本文中所论述的数据库结构的实施例以保持数据库最新。此外,可容易地更新所述实例性结构且同时仍实时在线。
尽管已显示及描述了数个优选实施例,但所属领域的技术人员应了解,可在不背离本发明范围的情况下做出各种改变及修改,本发明范围由所附权利要求书界定。
应注意与本说明书连同本申请案同时或在其之前提出申请并与本说明书一起供大众检阅的所有论文及文件,及所有此类论文及文件的内容以引用方式并入本文中。
本说明书(其中包含任何所附权利要求书、摘要及附图)中所揭示的所有特征及/或如此揭示的任何方法或过程的所有步骤可以任何组合相组合,但其中此类特征及/或步骤中的至少某些相互排斥的组合除外。
除非另有明确说明,否则本说明书(其中包含任何所附权利要求书、摘要及附图)中所揭示的每一特征可由用于相同的、等效的或类似目的的替代特征替代。因此,除非另有明确说明,否则每一所揭示特征仅为一类等效或类似特征的一个实例。
本发明并不限于前述实施例的细节。本发明可扩展到本说明书(其中包含任何所附权利要求书、摘要及图式)中所揭示特征的任何新颖特征或任何新颖组合,或扩展到如此揭示的任何方法或过程的步骤中的任何新颖步骤或任何新颖组合。

Claims (24)

1、一种资源接入过滤系统,其包括:
产生器单元(50),其经布置以形成数据库结构(400),其中所述产生器单元(50)包括:
分类单元(51),其经布置以提供各自与相应类别代码(310)相关联的多个资源识别符(200);
散列单元(52),其经布置以对所述多个资源识别符(200)中的每一者进行散列以提供散列值(300),并将所述散列值(300)划分为至少第一和第二散列部分(301、302);及
存储单元(53),其经布置以输出包含至少散列阵列(410)及主数据区段(420)的所述数据库结构(400),其中所述主数据区段(420)包括在多个主数据块(421)之间划分的所述第二散列部分(302)及所述相应类别代码(310),且所述散列阵列(410)包括各自与所述主数据区段(420)中的所述主数据块(421)中的相应一者的指针(412)相关联的所述第一散列部分(301);
客户端单元(10),其经布置以参照需求资源识别符(200)请求对资源(32)的接入;及
过滤器单元(40),其经布置以参照根据所述需求资源识别符(200)从所述数据库结构(400)获得的类别代码(310)控制对所述资源(32)的接入,其中所述过滤单元(40)包括:
通信单元(41),其经布置以获得与所述客户端装置(10)做出的资源接入请求相关的所述需求资源识别符(200);
数据库接入单元(42),其经布置以通过以下操作从所述数据库结构(400)返回适合于所述需求资源识别符(200)的类别代码(310):基于所述资源识别符(200)产生搜索散列值(300)并将所述搜索散列值(300)划分为至少第一和第二散列部分(301、302);通过使用所述第一散列部分(301)查阅所述散列阵列(410)来识别所述数据库结构(400)的所述主数据区段(420)中的相应主数据块(421);及根据所述第二散列部分(302)从所述相应主数据块(421)中检索所述类别代码(310);及
控制单元(43),其经布置以参照通过所述数据库接入单元(42)获得的所述类别代码(310)确定与所述客户端装置(10)做出的所述资源接入请求相关的控制动作。
2、如权利要求1所述的资源接入过滤系统,其中:
所述散列单元(52)经布置以将所述散列值(300)中的每一者划分为至少所述第一和第二散列部分(301、302)及第三散列部分(303),且所述存储单元(53)经布置以丢弃所述第三散列部分(303)中的每一者;且
所述数据库接入单元(42)经布置以将从所述需求资源识别符(200)导出的所述搜索散列值(300)划分为对应的至少所述第一和第二散列部分(301、302)及第三散列部分(303)。
3、如权利要求1所述的资源接入过滤系统,其中所述存储单元(53)经布置以基于所述第一散列部分(301)提供所述散列阵列(410)作为包括一组散列索引条目(411)的索引,其中所述散列索引条目(411)中的每一者包括识别所述主数据区段(420)中的所述主数据块(421)中的相应一者的所述指针(412)。
4、如权利要求3所述的资源接入过滤系统,其中所述散列索引条目(411)中的每一者进一步包括所述主数据区段(420)中的所述相应主数据块(421)的长度值(413),由此所述指针(412)与所述长度值(413)一起从所述主数据区段(420)中选择所述相应主数据块(421)。
5、如权利要求1所述的资源接入过滤系统,其中所述主数据区段(420)包括多个记录(422),其中每一记录(422)包括所述第二散列部分(302)中的相应一者及针对所述多个资源识别符(200)中的给定一者的所述相关联类别代码(310)。
6、如权利要求5所述的资源接入过滤系统,其中:
所述存储单元(53)进一步经布置以提供页面数据区段(440),且其中所述主数据区段(420)中的每一记录(422)进一步包括页面索引(426),所述页面索引给所述页面数据区段(440)中包括一个或一个以上页面数据串(441)及一个或一个以上相关联页面类别代码(311)的页面数据块(444)加索引;
所述通信单元(41)经布置以获得包含需求页面(204)的所述需求资源识别符(200);且
所述数据库接入单元(42)经布置以接收所述需求页面(204)且将所述需求页面(204)与所述相应页面数据块(444)中的所述页面数据串(441)进行比较并返回所述相关联页面类别代码(311)。
7、如权利要求6所述的资源接入过滤系统,其中所述页面索引(426)中的至少一个条目包括指示所述页面数据区段(440)中不存在针对所述记录(422)中的特定一者的页面数据串(441)的默认值。
8、如权利要求1所述的资源接入过滤系统,其中:
所述存储单元(53)进一步经布置以提供冲突数据区段(430),所述冲突数据区段(430)包括所述类别代码(310)及第一资源识别符(200)和第二资源识别符(200)中的至少一者的未划分的散列值(300),对于所述未划分的散列值(300)其所述第一和第二散列部分(301、302)冲突,且其中所述主数据区段(420)中针对所述第一和第二资源识别符(200)的所述记录(422)中的至少一者指示所述冲突数据区段(430)含有所述未划分的散列值(300);且
当所述主数据区段(420)中针对所述需求资源识别符(200)的所述相应记录(422)如此指示时,所述数据库接入单元(42)查阅所述冲突数据区段(430)。
9、如权利要求1所述的资源接入过滤系统,其中:
所述过滤器单元(40)包括至少较快接入的主要存储装置(44)及较慢接入的辅助存储装置(45);且
在第一基于存储器模式中,所述整个数据库结构(400)加载到所述较快接入的主要存储装置(44)中且通过将所述主散列阵列(410)中的所述指针(412)中的每一者转换为直接或间接地参考其中加载所述主数据区段(420)的所述主数据块(421)的存储器地址位置的存储器位置参考而初始化,并在所述较快接入的主要存储装置(44)中接入;且
在第二共享接入模式中,所述主散列阵列(410)加载到所述较快接入的主要存储装置(44)中,而至少所述主数据区段(420)保留在所述辅助存储装置(45)上且通过将所述主散列阵列(410)中的所述指针(412)中的每一者转换为从存储在所述辅助存储装置(45)上的所述数据库结构(400)的文件的开始的偏移而初始化,并通过从所述主要存储装置(44)中的所述主散列阵列(410)获得所述转换的偏移(412)并仅将所述需要的数据块(421)从所述主数据区段(420)加载到所述主要存储装置(44)中接入。
10、如权利要求9所述的资源接入过滤系统,其中所述过滤器单元(40)选择性地以所述第一基于存储器模式或以所述第二共享接入模式操作。
11、如权利要求1所述的资源接入过滤系统,其中:
所述产生器单元(50)进一步包括经布置以产生更新结构(500)的更新器单元(54);且
所述过滤器单元(40)经布置以将所述更新结构(500)施加到所述数据库结构(400a)的当前拷贝以产生并入有多个所需更新的经更新的新数据库结构(400b);
其中所述更新结构(500)包括至少主更新区段(520),所述主更新区段(520)包括更新命令(521)列表,每一更新命令(521)后面有一个或一个以上参数(522)以在所述主数据区段(420)中插入、修改或删除相应记录(422),且所述更新命令(521)经排序使得所述命令(521)的次序对应于所述主数据区段(420)中的所述记录(422)的次序。
12、如权利要求11所述的资源接入过滤系统,其中所述更新结构(500)包含至少以下命令:
插入命令,其指令所述过滤器单元(40)在通过给出其中将要执行所述指令的命令的偏移位置的位置参数(522)识别的位置处于所述主数据区段(420)中插入新记录(422),且还提供用于所述第二散列部分(302)及所述新记录(422)的所述类别代码(310)以及所述第一散列部分(301)的参数(522)以便由所述过滤器单元(40)重新计算所述主散列阵列(410)以计及所述新记录(422);
修改命令,其指令所述过滤器单元(40)在所述主数据区段(420)中修改现有记录(422),其中所述参数(522)提供将要写入到所述数据库结构(400)中的新数据以替代所述相关记录(422)的当前数据;及
删除命令,其指令所述过滤器单元(40)在通过给出其中将要执行所述指令的命令的偏移位置的位置参数(522)及包括所述相应第一散列部分(301)的参数(522)识别的位置处从数据库结构(400)的所述主数据区段(420)中删除记录(422),以使得所述过滤器单元(40)重新计算所述主散列阵列(410)以虑及所述现已删除的记录(422)。
13、如权利要求12所述的资源接入过滤系统,其中所述位置参数(522)给出相对于先前命令的位置或如果尚未给出先前命令则相对于默认开始位置的相对位置。
14、如权利要求11所述的资源接入过滤系统,其中所述存储单元(53)进一步经布置以提供页面数据区段(440),且所述更新器单元(54)经布置以提供包含页面更新区段(540)的所述更新结构(500),所述页面更新区段(540)具有页面更新命令(541)列表,每一页面更新命令(541)后面有一个或一个以上页面更新参数(542)以插入、修改或删除相应的页面串(441),且所述页面更新命令(541)是通过所述第一散列部分(301)且接着通过所述页面串(441)排序的。
15、如权利要求11所述的资源接入过滤系统,其中所述存储单元(53)进一步经布置以提供冲突数据区段(430),且所述更新器单元(54)经布置以提供包含冲突更新区段(530)的所述更新结构(500),所述冲突更新区段(530)具有冲突更新命令(531)列表,每一冲突更新命令(531)后面有一个或一个以上冲突更新参数(532)以插入、修改或删除相应的未划分散列值(300),且所述冲突更新命令(531)是通过所述未划分散列值(300)排序的。
16、如权利要求11所述的资源接入过滤系统,其中所述过滤器单元(40)经布置以通过以多个组块的形式复制所述数据库结构(400a)的当前活拷贝同时将所述更新命令(521)单独地依次施加到所述复制的组块中的每一者来更新所述数据库结构(400)以产生所述更新的新数据库结构(400b)。
17、如权利要求1所述的资源接入过滤系统,其中所述资源识别符(200)识别计算网络中的资源。
18、如权利要求1所述的资源接入过滤系统,其中所述资源识别符(200)包括统一资源定位符。
19、如权利要求1所述的资源接入过滤系统,其中所述资源识别符(200)包括至少主机部分(202)且所述散列单元(52)对所述主机部分(202)进行散列以提供所述散列值(300)。
20、一种用以形成数据库结构(400)的产生器设备(50),其包括:
分类单元(51),其经布置以提供各自与相应类别代码(310)相关联的多个资源识别符(200);
散列单元(52),其经布置以对所述多个资源识别符(200)中的每一者进行散列以提供散列值(300),并将所述散列值(300)划分为至少第一和第二散列部分(301、302);及
存储单元(53),其经布置以输出包含至少散列阵列(410)及主数据区段(420)的所述数据库结构(400),其中所述主数据区段(420)包括在多个主数据块(421)之间划分的所述第二散列部分(302)及所述相应类别代码(310),且所述散列阵列(410)包括各自与所述主数据区段(420)中的所述主数据块(421)的相应一者的指针(412)相关联的所述第一散列部分(301)。
21、一种用以控制对计算系统中的资源(32)的接入的过滤器设备(40),其包括:
过滤器单元(40),其经布置以参照根据需求资源识别符(200)从数据库结构(400)获得的类别代码(310)控制由客户端装置(10)对资源(32)的接入;及
数据库接入单元(42),其经布置以通过以下操作从所述数据库结构(400)获得适合于所述需求资源识别符(200)的所述类别代码(310):基于所述需求资源识别符(200)产生搜索散列值(300)并将所述搜索散列值(300)划分为至少第一和第二散列部分(301、302);通过使用所述第一散列部分(301)查阅所述散列阵列(410)来识别所述数据库结构(400)的主数据区段(420)中的相应主数据块(421);及根据所述第二散列部分(302)从所述相应主数据块(421)中检索所述类别代码(310)。
22、一种上面记录有存储数据的数据库结构(400)的计算机可读存储媒体,所述数据表示各自与相应类别代码(310)相关联的多个资源识别符(200),所述数据库结构(400)包括:
主数据区段(420),其具有多个主数据块(421),其中所述多个主数据块(421)中的每一者包括多个第二散列部分(302)且所述多个第二散列部分(302)中的每一者与相应类别代码(310)相关联;及
主散列阵列(410),其包括多个第一散列部分(301),其中所述第一散列部分(301)中的每一者与所述主数据区段(420)中的所述多个主数据块(421)中的相应一者的参考指针(412)相关联;
其中所述第一散列部分(301)及所述第二散列部分(302)中的每一者是从散列值(300)划分的,所述散列值(300)从所述多个资源识别符(200)中的相应一者导出。
23、一种形成数据库结构(400)的方法,其包括以下计算机实施的步骤:
提供各自与相应类别代码(310)相关联的多个资源识别符(200);
对所述多个资源识别符(200)中的每一者进行散列以提供相应散列值(300)并将所述相应散列值(300)划分为至少第一散列部分(301)及第二散列部分(302);及
将至少主散列阵列(410)及主数据区段(420)存储于所述数据库结构(400)中,其中所述主数据区段(420)包括各自包括与所述相应类别代码(310)相关联的一组所述第二散列部分(302)的多个主数据块(421),且所述主散列阵列(410)包括各自与所述主数据区段(420)中的所述多个主数据块(421)中的相应一者的参考(412)相关联的所述第一散列部分(301)。
24、一种从数据库结构(400)中检索数据的方法,其包括以下计算机实施的步骤:
接收识别计算系统中的资源(32)的需求资源识别符(200);
基于所述资源识别符(200)形成散列值(300)并将所述散列值(300)划分为至少第一和第二散列部分(301、302);
通过使用所述第一散列部分(301)查阅散列阵列(410)来识别所述数据库结构(400)的主数据区段(420)中的主数据块(421);
及根据所述第二散列部分(302)从所述识别的主数据块(421)中检索类别代码(310)。
CN2008800084870A 2007-01-22 2008-01-18 资源接入过滤系统及供与资源接入过滤系统一起使用的数据库结构 Expired - Fee Related CN101641695B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB0701158A GB2445764A (en) 2007-01-22 2007-01-22 Resource access filtering system and database structure for use therewith
GB0701158.8 2007-01-22
PCT/GB2008/050036 WO2008090373A1 (en) 2007-01-22 2008-01-18 Resource access filtering system and database structure for use therewith

Publications (2)

Publication Number Publication Date
CN101641695A true CN101641695A (zh) 2010-02-03
CN101641695B CN101641695B (zh) 2012-09-19

Family

ID=37846731

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008800084870A Expired - Fee Related CN101641695B (zh) 2007-01-22 2008-01-18 资源接入过滤系统及供与资源接入过滤系统一起使用的数据库结构

Country Status (7)

Country Link
US (1) US8250081B2 (zh)
EP (1) EP2118784A1 (zh)
CN (1) CN101641695B (zh)
AU (1) AU2008208691B2 (zh)
CA (1) CA2676452A1 (zh)
GB (1) GB2445764A (zh)
WO (1) WO2008090373A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102196061A (zh) * 2011-06-17 2011-09-21 福建星网锐捷网络有限公司 地址过滤表生成方法及装置、以太帧接收方法及装置
CN109885576A (zh) * 2019-03-06 2019-06-14 珠海金山网络游戏科技有限公司 一种哈希表创建方法及系统、计算设备及存储介质

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7818740B2 (en) * 2006-05-05 2010-10-19 Microsoft Corporation Techniques to perform gradual upgrades
US20080060062A1 (en) * 2006-08-31 2008-03-06 Robert B Lord Methods and systems for preventing information theft
US8549581B1 (en) * 2008-05-28 2013-10-01 Zscaler, Inc. Distributed network security system deploying guard tables
JP5160483B2 (ja) * 2009-03-11 2013-03-13 株式会社日立ソリューションズ ストレージシステム及びデータマイグレーション対応検索システム
US8380754B2 (en) * 2009-09-14 2013-02-19 Michael Ernst Laude Apparatus and methods for creating, updating, and using learning tools
CA2793960C (en) * 2010-03-23 2018-05-22 Reversinglabs Corporation Cloud-based web content filtering
CN102110132B (zh) * 2010-12-08 2013-06-19 北京星网锐捷网络技术有限公司 统一资源定位符匹配查找方法、装置和网络侧设备
US8095534B1 (en) 2011-03-14 2012-01-10 Vizibility Inc. Selection and sharing of verified search results
US8566295B2 (en) * 2011-05-31 2013-10-22 John E. G. Matze System and method for electronically storing essential data
US8775776B2 (en) * 2012-01-18 2014-07-08 International Business Machines Corporation Hash table using hash table banks
JP6098301B2 (ja) * 2013-03-29 2017-03-22 富士通株式会社 ストレージ制御装置、ストレージ制御方法、およびストレージ制御プログラム
US20150161282A1 (en) * 2013-12-11 2015-06-11 Yahoo! Inc. Method and System for Smart URL Shortening Service
US10114805B1 (en) * 2014-06-17 2018-10-30 Amazon Technologies, Inc. Inline address commands for content customization
US20160034210A1 (en) * 2014-07-31 2016-02-04 International Business Machines Corporation Committing data across multiple, heterogeneous storage devices
US10372684B2 (en) * 2015-01-09 2019-08-06 Quantum Corporation Metadata peering with improved inodes
US9886442B2 (en) 2015-01-12 2018-02-06 Microsoft Technology Licensing, Llc Enhanced compression, encoding, and naming for resource strings
US9467166B2 (en) 2015-01-12 2016-10-11 Microsoft Technology Licensing, Llc Enhanced compression, encoding, and naming for resource strings
US10430182B2 (en) 2015-01-12 2019-10-01 Microsoft Technology Licensing, Llc Enhanced compression, encoding, and naming for resource strings
US10467001B2 (en) 2015-01-12 2019-11-05 Microsoft Technology Licensing, Llc Enhanced compression, encoding, and naming for resource strings
CN104683496B (zh) * 2015-02-13 2018-06-19 小米通讯技术有限公司 地址过滤方法及装置
CN110734468B (zh) 2018-07-20 2021-04-16 济南高德医药科技有限公司 罗库溴铵粗品的精制方法
CN111898886B (zh) * 2020-07-16 2023-11-21 广东金宇恒软件科技有限公司 一种集体资产清产核资系统

Family Cites Families (290)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4423414A (en) 1981-08-27 1983-12-27 Burroughs Corporation System and method for name-lookup in a local area network data communication system
JPS6170654A (ja) 1984-09-14 1986-04-11 Hitachi Ltd 分散処理システムにおける資源管理方式
US4734036A (en) * 1984-11-30 1988-03-29 Helene Kasha Method and device for learning a language
US5758152A (en) * 1990-12-06 1998-05-26 Prime Arithmetics, Inc. Method and apparatus for the generation and manipulation of data structures
US5408642A (en) * 1991-05-24 1995-04-18 Symantec Corporation Method for recovery of a computer program infected by a computer virus
JPH04372037A (ja) 1991-06-21 1992-12-25 Matsushita Electric Ind Co Ltd システム管理情報設定装置
US5699287A (en) * 1992-09-30 1997-12-16 Texas Instruments Incorporated Method and device for adding and subtracting thermometer coded data
US5596330A (en) * 1992-10-15 1997-01-21 Nexus Telecommunication Systems Ltd. Differential ranging for a frequency-hopped remote position determination system
US5590403A (en) 1992-11-12 1996-12-31 Destineer Corporation Method and system for efficiently providing two way communication between a central network and mobile unit
US5581703A (en) 1993-06-29 1996-12-03 International Business Machines Corporation Method and apparatus for reserving system resources to assure quality of service
US5414833A (en) * 1993-10-27 1995-05-09 International Business Machines Corporation Network security system and method using a parallel finite state machine adaptive active monitor and responder
US5493692A (en) * 1993-12-03 1996-02-20 Xerox Corporation Selective delivery of electronic messages in a multiple computer system based on context and environment of a user
US5555376A (en) 1993-12-03 1996-09-10 Xerox Corporation Method for granting a user request having locational and contextual attributes consistent with user policies for devices having locational attributes consistent with the user request
US5606668A (en) 1993-12-15 1997-02-25 Checkpoint Software Technologies Ltd. System for securing inbound and outbound data packet flow in a computer network
US5835726A (en) 1993-12-15 1998-11-10 Check Point Software Technologies Ltd. System for securing the flow of and selectively modifying packets in a computer network
US5720033A (en) * 1994-06-30 1998-02-17 Lucent Technologies Inc. Security platform and method using object oriented rules for computer-based systems using UNIX-line operating systems
CA2197219A1 (en) 1994-08-09 1996-02-22 Shiva Corporation Apparatus and method for restricting access to a local computer network
US5682325A (en) 1994-09-12 1997-10-28 Bell Atlantic Network Services, Inc. Level 1 gateway for video tone networks
US5944794A (en) 1994-09-30 1999-08-31 Kabushiki Kaisha Toshiba User identification data management scheme for networking computer systems using wide area network
US5541911A (en) 1994-10-12 1996-07-30 3Com Corporation Remote smart filtering communication management system
US5864683A (en) * 1994-10-12 1999-01-26 Secure Computing Corporartion System for providing secure internetwork by connecting type enforcing secure computers to external network for limiting access to data based on user and process access rights
US5758257A (en) * 1994-11-29 1998-05-26 Herz; Frederick System and method for scheduling broadcast of and access to video programs and other data using customer profiles
CN100365535C (zh) 1995-02-13 2008-01-30 英特特拉斯特技术公司 用于安全交易管理和电子权利保护的系统和方法
US5832503A (en) 1995-02-24 1998-11-03 Cabletron Systems, Inc. Method and apparatus for configuration management in communications networks
US5696486A (en) 1995-03-29 1997-12-09 Cabletron Systems, Inc. Method and apparatus for policy-based alarm notification in a distributed network management environment
US5699513A (en) 1995-03-31 1997-12-16 Motorola, Inc. Method for secure network access via message intercept
US5586121A (en) 1995-04-21 1996-12-17 Hybrid Networks, Inc. Asymmetric hybrid access system and method
GB2316588B (en) * 1995-05-08 2000-05-31 Compuserve Inc Rules based electronic message management system
US5802278A (en) 1995-05-10 1998-09-01 3Com Corporation Bridge/router architecture for high performance scalable networking
CA2176775C (en) 1995-06-06 1999-08-03 Brenda Sue Baker System and method for database access administration
US5678041A (en) 1995-06-06 1997-10-14 At&T System and method for restricting user access rights on the internet based on rating information stored in a relational database
US5696898A (en) 1995-06-06 1997-12-09 Lucent Technologies Inc. System and method for database access control
US5774668A (en) 1995-06-07 1998-06-30 Microsoft Corporation System for on-line service in which gateway computer uses service map which includes loading condition of servers broadcasted by application servers for load balancing
US6456306B1 (en) 1995-06-08 2002-09-24 Nortel Networks Limited Method and apparatus for displaying health status of network devices
US6807558B1 (en) 1995-06-12 2004-10-19 Pointcast, Inc. Utilization of information “push” technology
US5706507A (en) * 1995-07-05 1998-01-06 International Business Machines Corporation System and method for controlling access to data located on a content server
US5648965A (en) 1995-07-07 1997-07-15 Sun Microsystems, Inc. Method and apparatus for dynamic distributed packet tracing and analysis
US5796944A (en) 1995-07-12 1998-08-18 3Com Corporation Apparatus and method for processing data frames in an internetworking device
US5941947A (en) 1995-08-18 1999-08-24 Microsoft Corporation System and method for controlling access to data entities in a computer network
US5712979A (en) * 1995-09-20 1998-01-27 Infonautics Corporation Method and apparatus for attaching navigational history information to universal resource locator links on a world wide web page
DE69626127T2 (de) * 1995-11-02 2003-10-23 British Telecomm Diensterzeugungsvorrichtung für ein Kommunikationsnetz und entsprechendes Verfahren
US5781801A (en) 1995-12-20 1998-07-14 Emc Corporation Method and apparatus for receive buffer management in multi-sender communication systems
DE69610905T2 (de) 1995-12-28 2001-06-21 Inc Indefense Verfahren zum schutz von ausführbaren softwareprogrammen gegen infektion durch softwareviren
US5787427A (en) 1996-01-03 1998-07-28 International Business Machines Corporation Information handling system, method, and article of manufacture for efficient object security processing by grouping objects sharing common control access policies
US5768519A (en) 1996-01-18 1998-06-16 Microsoft Corporation Method and apparatus for merging user accounts from a source security domain into a target security domain
US5826014A (en) 1996-02-06 1998-10-20 Network Engineering Software Firewall system for protecting network elements connected to a public network
US5855020A (en) 1996-02-21 1998-12-29 Infoseek Corporation Web scan process
US5832212A (en) 1996-04-19 1998-11-03 International Business Machines Corporation Censoring browser method and apparatus for internet viewing
US5884033A (en) * 1996-05-15 1999-03-16 Spyglass, Inc. Internet filtering system for filtering data transferred over the internet utilizing immediate and deferred filtering actions
US5787253A (en) 1996-05-28 1998-07-28 The Ag Group Apparatus and method of analyzing internet activity
US5842040A (en) 1996-06-18 1998-11-24 Storage Technology Corporation Policy caching method and apparatus for use in a communication device based on contents of one data unit in a subset of related data units
US5850523A (en) 1996-06-21 1998-12-15 National Instruments Corporation Method and system for monitoring fieldbus network with multiple packet filters
US5991807A (en) 1996-06-24 1999-11-23 Nortel Networks Corporation System for controlling users access to a distributive network in accordance with constraints present in common access distributive network interface separate from a server
US5835722A (en) 1996-06-27 1998-11-10 Logon Data Corporation System to control content and prohibit certain interactive attempts by a person using a personal computer
US5799002A (en) 1996-07-02 1998-08-25 Microsoft Corporation Adaptive bandwidth throttling for network services
US6052723A (en) * 1996-07-25 2000-04-18 Stockmaster.Com, Inc. Method for aggregate control on an electronic network
US5832228A (en) 1996-07-30 1998-11-03 Itt Industries, Inc. System and method for providing multi-level security in computer devices utilized with non-secure networks
EP0822502A1 (en) * 1996-07-31 1998-02-04 BRITISH TELECOMMUNICATIONS public limited company Data access system
US5950195A (en) 1996-09-18 1999-09-07 Secure Computing Corporation Generalized security policy management system and method
US6253188B1 (en) 1996-09-20 2001-06-26 Thomson Newspapers, Inc. Automated interactive classified ad system for the internet
US5933827A (en) 1996-09-25 1999-08-03 International Business Machines Corporation System for identifying new web pages of interest to a user
US5911043A (en) 1996-10-01 1999-06-08 Baker & Botts, L.L.P. System and method for computer-based rating of information retrieved from a computer network
US5884325A (en) * 1996-10-09 1999-03-16 Oracle Corporation System for synchronizing shared data between computers
US5958015A (en) 1996-10-29 1999-09-28 Abirnet Ltd. Network session wall passively listening to communication session, with use of access rules, stops further communication between network devices by emulating messages to the devices
US6167520A (en) 1996-11-08 2000-12-26 Finjan Software, Inc. System and method for protecting a client during runtime from hostile downloadables
US7058822B2 (en) 2000-03-30 2006-06-06 Finjan Software, Ltd. Malicious mobile code runtime monitoring system and methods
US5801747A (en) 1996-11-15 1998-09-01 Hyundai Electronics America Method and apparatus for creating a television viewer profile
US5848412A (en) 1996-11-19 1998-12-08 Ncr Corporation User controlled browser identification disclosing mechanism
US6070242A (en) * 1996-12-09 2000-05-30 Sun Microsystems, Inc. Method to activate unregistered systems in a distributed multiserver network environment
US5735726A (en) * 1996-12-09 1998-04-07 Telco Creations, Inc. Animated sitting and standing santa character
US5848233A (en) 1996-12-09 1998-12-08 Sun Microsystems, Inc. Method and apparatus for dynamic packet filter assignment
US6065059A (en) * 1996-12-10 2000-05-16 International Business Machines Corporation Filtered utilization of internet data transfers to reduce delay and increase user control
US5896502A (en) * 1996-12-10 1999-04-20 International Business Machines Corporation Internet data transfer control via a client system to reduce delay
US5889958A (en) * 1996-12-20 1999-03-30 Livingston Enterprises, Inc. Network access control system and process
US5892905A (en) * 1996-12-23 1999-04-06 International Business Machines Corporation Computer apparatus and method for providing a common user interface for software applications accessed via the world-wide web
US6832256B1 (en) 1996-12-27 2004-12-14 Intel Corporation Firewalls that filter based upon protocol commands
US5987611A (en) 1996-12-31 1999-11-16 Zone Labs, Inc. System and methodology for managing internet access on a per application basis for client computers connected to the internet
US6052730A (en) * 1997-01-10 2000-04-18 The Board Of Trustees Of The Leland Stanford Junior University Method for monitoring and/or modifying web browsing sessions
US6173364B1 (en) * 1997-01-15 2001-01-09 At&T Corp. Session cache and rule caching method for a dynamic filter
US6233686B1 (en) * 1997-01-17 2001-05-15 At & T Corp. System and method for providing peer level access control on a network
US6078913A (en) 1997-02-12 2000-06-20 Kokusai Denshin Denwa Co., Ltd. Document retrieval apparatus
AUPO525497A0 (en) 1997-02-21 1997-03-20 Mills, Dudley John Network-based classified information systems
US6862602B2 (en) * 1997-03-07 2005-03-01 Apple Computer, Inc. System and method for rapidly identifying the existence and location of an item in a file
US6178505B1 (en) * 1997-03-10 2001-01-23 Internet Dynamics, Inc. Secure delivery of information in a network
US6105027A (en) 1997-03-10 2000-08-15 Internet Dynamics, Inc. Techniques for eliminating redundant access checking by access filters
US5983270A (en) 1997-03-11 1999-11-09 Sequel Technology Corporation Method and apparatus for managing internetwork and intranetwork activity
US5987606A (en) 1997-03-19 1999-11-16 Bascom Global Internet Services, Inc. Method and system for content filtering information retrieved from an internet computer network
US5996011A (en) 1997-03-25 1999-11-30 Unified Research Laboratories, Inc. System and method for filtering data received by a computer system
US5937404A (en) 1997-04-23 1999-08-10 Appaloosa Interactive Corporation Apparatus for bleaching a de-activated link in a web page of any distinguishing color or feature representing an active link
US5899991A (en) * 1997-05-12 1999-05-04 Teleran Technologies, L.P. Modeling technique for system access control and management
US5961591A (en) 1997-05-13 1999-10-05 Microsoft Corporation Downloading data while rejection of its use may be overridden
US5968176A (en) 1997-05-29 1999-10-19 3Com Corporation Multilayer firewall system
US6012832A (en) * 1997-06-24 2000-01-11 Saunders; Michael Cashless peripheral device for a gaming system
US5899995A (en) * 1997-06-30 1999-05-04 Intel Corporation Method and apparatus for automatically organizing information
US5893086A (en) * 1997-07-11 1999-04-06 International Business Machines Corporation Parallel file system and method with extensible hashing
US5956734A (en) * 1997-07-11 1999-09-21 International Business Machines Corporation Parallel file system with a quota check utility
US6446119B1 (en) 1997-08-07 2002-09-03 Laslo Olah System and method for monitoring computer usage
US5919257A (en) 1997-08-08 1999-07-06 Novell, Inc. Networked workstation intrusion detection system
US5999929A (en) 1997-09-29 1999-12-07 Continuum Software, Inc World wide web link referral system and method for generating and providing related links for links identified in web pages
US5978807A (en) 1997-09-30 1999-11-02 Sony Corporation Apparatus for and method of automatically downloading and storing internet web pages
US6266664B1 (en) 1997-10-01 2001-07-24 Rulespace, Inc. Method for scanning, analyzing and rating digital information content
US6058389A (en) * 1997-10-31 2000-05-02 Oracle Corporation Apparatus and method for message queuing in a database system
US6357010B1 (en) * 1998-02-17 2002-03-12 Secure Computing Corporation System and method for controlling access to documents stored on an internal network
US6055564A (en) * 1998-03-11 2000-04-25 Hewlett Packard Company Admission control where priority indicator is used to discriminate between messages
US6233618B1 (en) * 1998-03-31 2001-05-15 Content Advisor, Inc. Access control of networked data
US6185681B1 (en) * 1998-05-07 2001-02-06 Stephen Zizzi Method of transparent encryption and decryption for an electronic document management system
US6219667B1 (en) * 1998-05-28 2001-04-17 International Business Machines Corporation Efficient large-scale access control for internet/intranet information systems
US6742003B2 (en) 2001-04-30 2004-05-25 Microsoft Corporation Apparatus and accompanying methods for visualizing clusters of data and hierarchical cluster classifications
US6377577B1 (en) * 1998-06-30 2002-04-23 Cisco Technology, Inc. Access control list processing in hardware
US6085241A (en) 1998-07-22 2000-07-04 Amplify. Net, Inc. Internet user-bandwidth management and control tool
US6493758B1 (en) 1998-09-08 2002-12-10 Microsoft Corporation Offline viewing of internet content with a mobile device
US6301658B1 (en) 1998-09-09 2001-10-09 Secure Computing Corporation Method and system for authenticating digital certificates issued by an authentication hierarchy
US6567800B1 (en) 1998-10-01 2003-05-20 At&T Corp. System and method for searching information stored on a network
US6907425B1 (en) 1998-10-01 2005-06-14 At&T Corp. System and method for searching information stored on a network
US6460141B1 (en) 1998-10-28 2002-10-01 Rsa Security Inc. Security and access management system for web-enabled and non-web-enabled applications and content on a computer network
US7603685B2 (en) 1998-11-03 2009-10-13 United Video Properties, Inc. Program guide system with combination category search
EP1517259A1 (en) * 1998-12-03 2005-03-23 Samsung Electronics Co., Ltd. A method and system for generating a subscriber profile
US6266774B1 (en) * 1998-12-08 2001-07-24 Mcafee.Com Corporation Method and system for securing, managing or optimizing a personal computer
US6418433B1 (en) 1999-01-28 2002-07-09 International Business Machines Corporation System and method for focussed web crawling
US6154741A (en) 1999-01-29 2000-11-28 Feldman; Daniel J. Entitlement management and access control system
JP3220104B2 (ja) 1999-02-16 2001-10-22 ケイディーディーアイ株式会社 Url階層構造を利用した情報自動フィルタリング方法および装置
US6366298B1 (en) * 1999-06-03 2002-04-02 Netzero, Inc. Monitoring of individual internet usage
US6904609B1 (en) 1999-03-18 2005-06-07 Microsoft Corporation Systems and methods for electronic program guide data services
US20010044800A1 (en) 2000-02-22 2001-11-22 Sherwin Han Internet organizer
US6486892B1 (en) * 1999-04-07 2002-11-26 Joseph L. Stern System and method for accessing, manipulating and viewing internet and non-internet related information and for controlling networked devices
US6519571B1 (en) * 1999-05-27 2003-02-11 Accenture Llp Dynamic customer profile management
US6295559B1 (en) 1999-08-26 2001-09-25 International Business Machines Corporation Rating hypermedia for objectionable content
US6839680B1 (en) * 1999-09-30 2005-01-04 Fujitsu Limited Internet profiling
US6792458B1 (en) * 1999-10-04 2004-09-14 Urchin Software Corporation System and method for monitoring and analyzing internet traffic
WO2001031512A2 (en) * 1999-10-25 2001-05-03 Infolibria, Inc. Fast indexing of web objects
US6434662B1 (en) * 1999-11-02 2002-08-13 Juniper Networks, Inc. System and method for searching an associative memory utilizing first and second hash functions
JP4279427B2 (ja) 1999-11-22 2009-06-17 富士通株式会社 通信支援方法及びシステム
US20020049883A1 (en) * 1999-11-29 2002-04-25 Eric Schneider System and method for restoring a computer system after a failure
US6832230B1 (en) 1999-12-22 2004-12-14 Nokia Corporation Apparatus and associated method for downloading an application with a variable lifetime to a mobile terminal
US6606659B1 (en) 2000-01-28 2003-08-12 Websense, Inc. System and method for controlling access to internet sites
US7185361B1 (en) * 2000-01-31 2007-02-27 Secure Computing Corporation System, method and computer program product for authenticating users using a lightweight directory access protocol (LDAP) directory server
JP4971572B2 (ja) 2000-03-03 2012-07-11 ダン アンド ブラッドストリート インコーポレイテッド 電子商取引での取引の容易化
US7565403B2 (en) 2000-03-16 2009-07-21 Microsoft Corporation Use of a bulk-email filter within a system for classifying messages for urgency or importance
US7159237B2 (en) 2000-03-16 2007-01-02 Counterpane Internet Security, Inc. Method and system for dynamic network intrusion monitoring, detection and response
US20010032258A1 (en) 2000-03-31 2001-10-18 Kabushiki Kaisha Free Bit.Com System for internet connections, system for providing internet user information, method for providing internet user preference information, and method for distributing digital contents using the internet
US7418440B2 (en) 2000-04-13 2008-08-26 Ql2 Software, Inc. Method and system for extraction and organizing selected data from sources on a network
US6772214B1 (en) 2000-04-27 2004-08-03 Novell, Inc. System and method for filtering of web-based content stored on a proxy cache server
US6993044B2 (en) 2000-05-19 2006-01-31 Scientific-Atlanta, Inc. Computerized method for allocating access across a shared communication medium
JP3730480B2 (ja) 2000-05-23 2006-01-05 株式会社東芝 ゲートウェイ装置
US20040034794A1 (en) * 2000-05-28 2004-02-19 Yaron Mayer System and method for comprehensive general generic protection for computers against malicious programs that may steal information and/or cause damages
US6981281B1 (en) 2000-06-21 2005-12-27 Microsoft Corporation Filtering a permission set using permission requests associated with a code assembly
US7051200B1 (en) 2000-06-27 2006-05-23 Microsoft Corporation System and method for interfacing a software process to secure repositories
US7350204B2 (en) 2000-07-24 2008-03-25 Microsoft Corporation Policies for secure software execution
EP1180889A3 (en) 2000-08-17 2003-09-24 Sun Microsystems, Inc. Certificate validation system
US6785732B1 (en) 2000-09-11 2004-08-31 International Business Machines Corporation Web server apparatus and method for virus checking
US6886099B1 (en) 2000-09-12 2005-04-26 Networks Associates Technology, Inc. Computer virus detection
US6571249B1 (en) 2000-09-27 2003-05-27 Siemens Aktiengesellschaft Management of query result complexity in hierarchical query result data structure using balanced space cubes
JP2002175010A (ja) 2000-09-29 2002-06-21 Shinu Ko ホームページ改竄防止システム
US20020073089A1 (en) 2000-09-29 2002-06-13 Andrew Schwartz Method and system for creating and managing relational data over the internet
US6650890B1 (en) 2000-09-29 2003-11-18 Postini, Inc. Value-added electronic messaging services and transparent implementation thereof using intermediate server
AU2002211349A1 (en) 2000-10-03 2002-04-15 Sun Microsystems, Inc. Http transaction monitor with capacity to replay in debugging session
US20030177187A1 (en) 2000-11-27 2003-09-18 Butterfly.Net. Inc. Computing grid for massively multi-player online games and other multi-user immersive persistent-state and session-based applications
US6894991B2 (en) 2000-11-30 2005-05-17 Verizon Laboratories Inc. Integrated method for performing scheduling, routing and access control in a computer network
GB2369695B (en) * 2000-11-30 2005-03-16 Indigo One Technologies Ltd Database
US7209893B2 (en) * 2000-11-30 2007-04-24 Nokia Corporation Method of and a system for distributing electronic content
US20020078045A1 (en) 2000-12-14 2002-06-20 Rabindranath Dutta System, method, and program for ranking search results using user category weighting
AU2002230824A1 (en) 2000-12-15 2002-07-01 The Johns Hopkins University Dynamic-content web crawling through traffic monitoring
US6928051B2 (en) 2000-12-18 2005-08-09 Intel Corporation Application based bandwidth limiting proxies
US7096493B1 (en) 2000-12-21 2006-08-22 Gary G. Liu Internet file safety information center
JP4329264B2 (ja) 2000-12-27 2009-09-09 セイコーエプソン株式会社 アクセス権限レベル制御装置及び方法
US6782388B2 (en) 2000-12-29 2004-08-24 Bellsouth Intellectual Property Corporation Error usage investigation and disposal system
US7062649B2 (en) 2001-01-12 2006-06-13 Hewlett-Packard Development Company, L.P. System and method for categorizing security profile rules within a computer system
US7213069B2 (en) 2001-02-28 2007-05-01 Microsoft Corporation Category name service able to override the category name based on requestor privilege information
US7363657B2 (en) 2001-03-12 2008-04-22 Emc Corporation Using a virus checker in one file server to check for viruses in another file server
US7681032B2 (en) 2001-03-12 2010-03-16 Portauthority Technologies Inc. System and method for monitoring unauthorized transport of digital content
US7058663B2 (en) 2001-03-13 2006-06-06 Koninklijke Philips Electronics, N.V. Automatic data update
US20030018903A1 (en) * 2001-03-19 2003-01-23 Greca Damon G. Della Method of containing spread of computer viruses
DE60227220D1 (de) 2001-03-29 2008-08-07 Sony Corp Vorrichtung zur informationsverarbeitung
US7114184B2 (en) 2001-03-30 2006-09-26 Computer Associates Think, Inc. System and method for restoring computer systems damaged by a malicious computer program
US7080000B1 (en) 2001-03-30 2006-07-18 Mcafee, Inc. Method and system for bi-directional updating of antivirus database
US20020152284A1 (en) 2001-04-13 2002-10-17 John Cambray System and method for performing real time monitoring and control of an interactive network
US7895445B1 (en) * 2001-04-26 2011-02-22 Nokia Corporation Token-based remote data access
US7228565B2 (en) 2001-05-15 2007-06-05 Mcafee, Inc. Event reporting between a reporting computer and a receiving computer
US20030182420A1 (en) * 2001-05-21 2003-09-25 Kent Jones Method, system and apparatus for monitoring and controlling internet site content access
US6898737B2 (en) 2001-05-24 2005-05-24 Microsoft Corporation Automatic classification of event data
US7188368B2 (en) 2001-05-25 2007-03-06 Lenovo (Singapore) Pte. Ltd. Method and apparatus for repairing damage to a computer system using a system rollback mechanism
US20030023660A1 (en) * 2001-06-01 2003-01-30 Bogdan Kosanovic Real-time embedded resource management system
US6741997B1 (en) 2001-06-14 2004-05-25 Oracle International Corporation Instantiating objects in distributed database systems
US20030126136A1 (en) 2001-06-22 2003-07-03 Nosa Omoigui System and method for knowledge retrieval, management, delivery and presentation
US6934745B2 (en) * 2001-06-28 2005-08-23 Packeteer, Inc. Methods, apparatuses and systems enabling a network services provider to deliver application performance management services
US20030009495A1 (en) * 2001-06-29 2003-01-09 Akli Adjaoute Systems and methods for filtering electronic content
CN100419616C (zh) * 2001-07-17 2008-09-17 松下电器产业株式会社 内容使用装置和网络系统,以及许可信息获取方法
GB0117721D0 (en) 2001-07-20 2001-09-12 Surfcontrol Plc Database and method of generating same
US7310817B2 (en) 2001-07-26 2007-12-18 Mcafee, Inc. Centrally managed malware scanning
US7225430B2 (en) 2001-07-26 2007-05-29 Landesk Software Limited Software code management method and apparatus
US20060036874A1 (en) * 2001-08-08 2006-02-16 Igt Data pattern verification in a gaming machine environment
US7310821B2 (en) 2001-08-27 2007-12-18 Dphi Acquisitions, Inc. Host certification method and system
US20040019656A1 (en) * 2001-10-04 2004-01-29 Smith Jeffrey C. System and method for monitoring global network activity
US7526654B2 (en) * 2001-10-16 2009-04-28 Marc Charbonneau Method and system for detecting a secure state of a computer system
US7680892B2 (en) * 2001-11-06 2010-03-16 Ihance, Inc. Method and system for monitoring email and website behavior of an email recipient
US7243366B2 (en) 2001-11-15 2007-07-10 General Instrument Corporation Key management protocol and authentication system for secure internet protocol rights management architecture
US7447215B2 (en) 2001-12-03 2008-11-04 Hatteras Networks Methods, systems, and computer program products for classifying a packet based on a destination address
US6947985B2 (en) * 2001-12-05 2005-09-20 Websense, Inc. Filtering techniques for managing access to internet sites or other software applications
US7194464B2 (en) 2001-12-07 2007-03-20 Websense, Inc. System and method for adapting an internet filter
US20030110272A1 (en) 2001-12-11 2003-06-12 Du Castel Bertrand System and method for filtering content
US6944772B2 (en) 2001-12-26 2005-09-13 D'mitri Dozortsev System and method of enforcing executable code identity verification over the network
US20030126139A1 (en) 2001-12-28 2003-07-03 Lee Timothy A. System and method for loading commercial web sites
US7140042B2 (en) 2002-01-14 2006-11-21 Mcafee, Inc. System and method for preventing software piracy
GB2384659B (en) 2002-01-25 2004-01-14 F Secure Oyj Anti-virus protection at a network gateway
JP2005518114A (ja) 2002-02-14 2005-06-16 アバイア テクノロジー コーポレーション 存在追跡および名前空間相互接続の技術
US6792510B1 (en) 2002-02-14 2004-09-14 Novell, Inc. System and method for updating a cache
US20050155012A1 (en) 2002-02-15 2005-07-14 Shuichi Tayama Application creation system, creation apparatus, creation method, application providing system, providing apparatus, providing method, application operation system, operation apparatus, and operation method
US7089246B1 (en) 2002-02-28 2006-08-08 America Online, Inc. Overriding content ratings and restricting access to requested resources
US7136867B1 (en) 2002-04-08 2006-11-14 Oracle International Corporation Metadata format for hierarchical data storage on a raw storage device
US7359372B2 (en) * 2002-06-12 2008-04-15 Telefonaktibolaget Lm Ericsson (Publ) Method and apparatus for fast change of internet protocol headers compression mechanism
US20040006621A1 (en) * 2002-06-27 2004-01-08 Bellinson Craig Adam Content filtering for web browsing
US7631318B2 (en) * 2002-06-28 2009-12-08 Microsoft Corporation Secure server plug-in architecture for digital rights management systems
US7373666B2 (en) * 2002-07-01 2008-05-13 Microsoft Corporation Distributed threat management
US7379978B2 (en) * 2002-07-19 2008-05-27 Fiserv Incorporated Electronic item management and archival system and method of operating the same
US7159119B2 (en) * 2002-09-06 2007-01-02 United States Postal Service Method and system for efficiently retrieving secured data by securely pre-processing provided access information
US20040049514A1 (en) * 2002-09-11 2004-03-11 Sergei Burkov System and method of searching data utilizing automatic categorization
FI113499B (fi) 2002-09-12 2004-04-30 Jarmo Talvitie Turvajärjestelmä, menetelmä ja laite tietokonevirusten torjumiseksi sekä tiedon eristämiseksi
US7203691B2 (en) * 2002-09-27 2007-04-10 Ncr Corp. System and method for retrieving information from a database
US20040068479A1 (en) * 2002-10-04 2004-04-08 International Business Machines Corporation Exploiting asynchronous access to database operations
US7437760B2 (en) 2002-10-10 2008-10-14 International Business Machines Corporation Antiviral network system
JP4217455B2 (ja) * 2002-10-15 2009-02-04 キヤノン株式会社 周辺装置、情報処理方法、および制御プログラム
US6850943B2 (en) * 2002-10-18 2005-02-01 Check Point Software Technologies, Inc. Security system and methodology for providing indirect access control
US8909926B2 (en) 2002-10-21 2014-12-09 Rockwell Automation Technologies, Inc. System and methodology providing automation security analysis, validation, and learning in an industrial controller environment
EP2315132A3 (en) 2002-11-08 2011-07-13 Dun & Bradstreet, Inc. System and method for searching and matching databases
US7376969B1 (en) 2002-12-02 2008-05-20 Arcsight, Inc. Real time monitoring and analysis of events from multiple network security devices
US7600234B2 (en) 2002-12-10 2009-10-06 Fisher-Rosemount Systems, Inc. Method for launching applications
US7624110B2 (en) 2002-12-13 2009-11-24 Symantec Corporation Method, system, and computer program product for security within a global computer network
FI20030104A0 (fi) 2003-01-23 2003-01-23 Stonesoft Oyj Ilkivaltaisten yhteyksien ilmaisu ja estäminen
US20040153644A1 (en) 2003-02-05 2004-08-05 Mccorkendale Bruce Preventing execution of potentially malicious software
WO2004072834A1 (en) 2003-02-14 2004-08-26 Whale Communications Ltd. System and method for providing conditional access to server-based applications from remote access devices
US7185015B2 (en) 2003-03-14 2007-02-27 Websense, Inc. System and method of monitoring and controlling application files
US7529754B2 (en) 2003-03-14 2009-05-05 Websense, Inc. System and method of monitoring and controlling application files
US20040187029A1 (en) 2003-03-21 2004-09-23 Ting David M. T. System and method for data and request filtering
US20060168006A1 (en) * 2003-03-24 2006-07-27 Mr. Marvin Shannon System and method for the classification of electronic communication
GB2400931B (en) * 2003-04-25 2006-09-27 Messagelabs Ltd A method of, and system for, replacing external links in electronic documents
US8145710B2 (en) * 2003-06-18 2012-03-27 Symantec Corporation System and method for filtering spam messages utilizing URL filtering module
US20050132042A1 (en) 2003-07-07 2005-06-16 Martin Cryer HTTP protocol-based internet document rating system
US20050015626A1 (en) * 2003-07-15 2005-01-20 Chasin C. Scott System and method for identifying and filtering junk e-mail messages or spam based on URL content
US7373514B2 (en) * 2003-07-23 2008-05-13 Intel Corporation High-performance hashing system
JP4218451B2 (ja) * 2003-08-05 2009-02-04 株式会社日立製作所 ライセンス管理システム、サーバ装置および端末装置
US7421498B2 (en) 2003-08-25 2008-09-02 Microsoft Corporation Method and system for URL based filtering of electronic communications and web pages
US7376154B2 (en) 2003-08-29 2008-05-20 Agilent Technologies, Inc. Non-intrusive method for routing policy discovery
US7587488B2 (en) 2003-09-15 2009-09-08 Blue Coat Systems, Inc. Dynamic background rater for internet content
US7631181B2 (en) * 2003-09-22 2009-12-08 Canon Kabushiki Kaisha Communication apparatus and method, and program for applying security policy
US20050108557A1 (en) 2003-10-11 2005-05-19 Kayo David G. Systems and methods for detecting and preventing unauthorized access to networked devices
US20050091535A1 (en) * 2003-10-24 2005-04-28 Microsoft Corporation Application identity for software products
US7082429B2 (en) 2003-12-10 2006-07-25 National Chiao Tung University Method for web content filtering
US7398399B2 (en) 2003-12-12 2008-07-08 International Business Machines Corporation Apparatus, methods and computer programs for controlling performance of operations within a data processing system or network
US7523314B2 (en) 2003-12-22 2009-04-21 Voltage Security, Inc. Identity-based-encryption message management system
US7966658B2 (en) * 2004-04-08 2011-06-21 The Regents Of The University Of California Detecting public network attacks using signatures and fast content analysis
US7870608B2 (en) * 2004-05-02 2011-01-11 Markmonitor, Inc. Early detection and monitoring of online fraud
US20070299915A1 (en) 2004-05-02 2007-12-27 Markmonitor, Inc. Customer-based detection of online fraud
US20050273858A1 (en) 2004-06-07 2005-12-08 Erez Zadok Stackable file systems and methods thereof
US7971245B2 (en) 2004-06-21 2011-06-28 Ebay Inc. Method and system to detect externally-referenced malicious data for access and/or publication via a computer system
US7606821B2 (en) * 2004-06-30 2009-10-20 Ebay Inc. Method and system for preventing fraudulent activities
US7428530B2 (en) * 2004-07-01 2008-09-23 Microsoft Corporation Dispersing search engine results by using page category information
GB2418037B (en) * 2004-09-09 2007-02-28 Surfcontrol Plc System, method and apparatus for use in monitoring or controlling internet access
GB2418999A (en) * 2004-09-09 2006-04-12 Surfcontrol Plc Categorizing uniform resource locators
GB2418108B (en) * 2004-09-09 2007-06-27 Surfcontrol Plc System, method and apparatus for use in monitoring or controlling internet access
WO2006036170A1 (en) 2004-09-15 2006-04-06 Pcsafe, Inc. Methods and systems for filtering urls, webpages, and content
GB2418330B (en) 2004-09-17 2006-11-08 Jeroen Oostendorp Platform for intelligent Email distribution
US20060064469A1 (en) * 2004-09-23 2006-03-23 Cisco Technology, Inc. System and method for URL filtering in a firewall
US8037527B2 (en) 2004-11-08 2011-10-11 Bt Web Solutions, Llc Method and apparatus for look-ahead security scanning
US20060080735A1 (en) * 2004-09-30 2006-04-13 Usa Revco, Llc Methods and systems for phishing detection and notification
US20060075494A1 (en) * 2004-10-01 2006-04-06 Bertman Justin R Method and system for analyzing data for potential malware
US8117339B2 (en) 2004-10-29 2012-02-14 Go Daddy Operating Company, LLC Tracking domain name related reputation
US20060095459A1 (en) 2004-10-29 2006-05-04 Warren Adelman Publishing domain name related reputation in whois records
US20060095404A1 (en) 2004-10-29 2006-05-04 The Go Daddy Group, Inc Presenting search engine results based on domain name related reputation
US7716727B2 (en) 2004-10-29 2010-05-11 Microsoft Corporation Network security device and method for protecting a computing device in a networked environment
US7574409B2 (en) * 2004-11-04 2009-08-11 Vericept Corporation Method, apparatus, and system for clustering and classification
US20060191008A1 (en) 2004-11-30 2006-08-24 Sensory Networks Inc. Apparatus and method for accelerating intrusion detection and prevention systems using pre-filtering
US7580982B2 (en) 2004-12-14 2009-08-25 The Go Daddy Group, Inc. Email filtering system and method
CN1652112A (zh) * 2005-03-02 2005-08-10 北京北方烽火科技有限公司 一种嵌入式环境下数据字典的实现方法
US7562304B2 (en) 2005-05-03 2009-07-14 Mcafee, Inc. Indicating website reputations during website manipulation of user information
US20060259948A1 (en) 2005-05-12 2006-11-16 International Business Machines Corporation Integrated document handling in distributed collaborative applications
US7788723B2 (en) 2005-05-17 2010-08-31 Computer Associates Think, Inc. Method and apparatus for identifying computer vulnerabilities using exploit probes and remote scanning
US8010609B2 (en) 2005-06-20 2011-08-30 Symantec Corporation Method and apparatus for maintaining reputation lists of IP addresses to detect email spam
US20070011739A1 (en) * 2005-06-28 2007-01-11 Shay Zamir Method for increasing the security level of a user machine browsing web pages
US20070028302A1 (en) * 2005-07-29 2007-02-01 Bit 9, Inc. Distributed meta-information query in a network
US7516184B2 (en) 2005-11-22 2009-04-07 Cisco Technology, Inc. Method and system for a method for evaluating a message based in part on a registrar reputation
US8938515B2 (en) 2005-12-29 2015-01-20 Sap Se Master queue for messaging service
US20070204223A1 (en) 2006-02-27 2007-08-30 Jay Bartels Methods of and systems for personalizing and publishing online content
US7636703B2 (en) 2006-05-02 2009-12-22 Exegy Incorporated Method and apparatus for approximate pattern matching
US20080209057A1 (en) * 2006-09-28 2008-08-28 Paul Martini System and Method for Improved Internet Content Filtering
US20080086372A1 (en) * 2006-10-10 2008-04-10 Anand Madhavan Contextual banner advertising
US20080267144A1 (en) 2007-04-26 2008-10-30 Motorola, Inc. System and method for managing broadcast and/or multicast based communication sessions for mobile nodes
US7979895B2 (en) * 2007-08-16 2011-07-12 International Business Machines Corporation System and method for partitioning a multi-level security namespace
US8180838B2 (en) * 2008-08-29 2012-05-15 Microsoft Corporation Efficiently managing modular data storage systems
US8555080B2 (en) * 2008-09-11 2013-10-08 Workshare Technology, Inc. Methods and systems for protect agents using distributed lightweight fingerprints
US8560558B2 (en) * 2010-04-28 2013-10-15 Fujitsu Limited Computer product, search apparatus, management apparatus, search method, and management method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102196061A (zh) * 2011-06-17 2011-09-21 福建星网锐捷网络有限公司 地址过滤表生成方法及装置、以太帧接收方法及装置
CN102196061B (zh) * 2011-06-17 2013-11-20 福建星网锐捷网络有限公司 地址过滤表生成方法及装置、以太帧接收方法及装置
CN109885576A (zh) * 2019-03-06 2019-06-14 珠海金山网络游戏科技有限公司 一种哈希表创建方法及系统、计算设备及存储介质
CN109885576B (zh) * 2019-03-06 2020-12-01 珠海金山网络游戏科技有限公司 一种哈希表创建方法及系统、计算设备及存储介质

Also Published As

Publication number Publication date
AU2008208691B2 (en) 2012-11-29
CN101641695B (zh) 2012-09-19
GB0701158D0 (en) 2007-02-28
EP2118784A1 (en) 2009-11-18
US20100217771A1 (en) 2010-08-26
US8250081B2 (en) 2012-08-21
AU2008208691A1 (en) 2008-07-31
WO2008090373A1 (en) 2008-07-31
CA2676452A1 (en) 2008-07-31
GB2445764A (en) 2008-07-23

Similar Documents

Publication Publication Date Title
CN101641695B (zh) 资源接入过滤系统及供与资源接入过滤系统一起使用的数据库结构
CN103348344B (zh) 图形数据的复合语句索引
JP5656563B2 (ja) 文書管理システム、文書管理システムの制御方法、プログラム
Cambazoglu et al. Scalability challenges in web search engines
EP2478452B1 (en) File search system and program
JP5121194B2 (ja) 組織内情報検索システム及び組織内情報検索プログラム
CN102184211B (zh) 文件系统和检索、写入、修改或删除文件的方法与装置
CN108073710B (zh) 基于动态网络图挖掘的Github开源代码库推荐系统
CN103380421A (zh) 用于图形数据的分布式缓存
US20040015486A1 (en) System and method for storing and retrieving data
JPH09153050A (ja) 文書情報収集方法および文書情報収集装置
CN101136027B (zh) 用于数据库索引、搜索和数据检索的系统和方法
CN103812939A (zh) 一种大数据存储系统
CN108984686A (zh) 一种基于日志合并的分布式文件系统索引方法和装置
US20100174719A1 (en) System, method, and program product for personalization of an open network search engine
Fuguang Research on campus network cloud storage open platform based on cloud computing and big data technology
CN114443599A (zh) 数据同步方法、装置、电子设备及存储介质
CN103823805A (zh) 基于社区的相关帖推荐系统及推荐方法
JP2005056371A (ja) Web検索情報の管理方法、管理システム、コンピュータソフトウェアプログラム
CN102597969A (zh) 带属性的键值存储的数据库管理装置及其键值存储结构的高速缓存装置
JP2004102818A (ja) 検索支援方法および検索支援装置
CN106649462A (zh) 一种针对海量数据全文检索场景的实现方法
JP2005209020A (ja) 属性情報提供システム,属性情報管理装置,利用者端末,属性情報管理方法,およびコンピュータプログラム
JP2005031867A (ja) ウエブ情報収集装置及びウエブ情報収集方法
US9633028B2 (en) Collaborative and personalized storage and search in hierarchical abstract data organization systems

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120919

Termination date: 20130118