CN104756085A - 用于集成计算系统的顺应性测试引擎 - Google Patents

用于集成计算系统的顺应性测试引擎 Download PDF

Info

Publication number
CN104756085A
CN104756085A CN201380055731.XA CN201380055731A CN104756085A CN 104756085 A CN104756085 A CN 104756085A CN 201380055731 A CN201380055731 A CN 201380055731A CN 104756085 A CN104756085 A CN 104756085A
Authority
CN
China
Prior art keywords
test
value
attribute
identifier
assembly
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380055731.XA
Other languages
English (en)
Inventor
T·多林斯基
J·P·斯特瑞特
N·汉森
X·V·单
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
VCE Co LLC
Original Assignee
VCE Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by VCE Co LLC filed Critical VCE Co LLC
Publication of CN104756085A publication Critical patent/CN104756085A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3692—Test management for test results analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/008—Reliability or availability analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3048—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the topology of the computing system or computing system component explicitly influences the monitoring activity, e.g. serial, hierarchical systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4411—Configuring for operating with peripheral devices; Loading of device drivers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/022—Multivendor or multi-standard integration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/0233—Object-oriented techniques, for representation of network management data, e.g. common object request broker architecture [CORBA]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/085—Retrieval of network configuration; Tracking network configuration history
    • H04L41/0853—Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information
    • H04L41/0856—Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information by backing up or archiving configuration information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12—Discovery or management of network topologies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G06F11/3086—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves the use of self describing data formats, i.e. metadata, markup languages, human readable formats
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
    • Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
    • Y04S40/00—Systems for electrical power generation, transmission, distribution or end-user application management characterised by the use of communication or information technologies, or communication or information technology specific aspects supporting them

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Computer Security & Cryptography (AREA)
  • Debugging And Monitoring (AREA)
  • Stored Programmes (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Computer And Data Communications (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本申请公开了一种检测具有服务器组件、网络组件和存储器组件的集成计算系统是否遵循配置基准的技术，配置基准被表示为第一标记语言语句诸如XML的规则。该规则被解析以获得识别第二组标记语言语句中的测试定义的测试定义标识符，其中每个测试定义包括测试值和系统组件属性的属性标识符。管理数据库被组织为所有系统组件的集成对象模型。利用来自每个规则的测试定义标识符来调用解释器，以处理每个测试定义以便(a)使用属性标识符访问对象模型，从而获得对应的属性的实际值，并且(b)将获得的实际值与测试定义的测试值比较从而产生比较结果值；比较结果值被存储或作为顺应性指示符被传送给人类用户或机器用户。

Description

用于集成计算系统的顺应性测试引擎
技术领域
本发明涉及数据处理(计算)系统领域，并且更具体地涉及测试计算系统与配置请求的顺应性的领域。
背景技术
顺应性测试用于将计算机的实际配置与指定的或“基准”的配置作比较。在某些情况下，例如，组织(诸如政府或公司)可以请求计算机具有具体的配置以满足安全性或互用性的需求。基准配置可以识别顺应性要求的各种硬件元件和软件元件、以及要求的元件的属性值。例如，基准可以识别操作系统(元件)以及已知用来提供某些安全相关功能的操作系统的修正级别(属性)。
美国政府提议了在被称为安全内容自动化协议或SCAP保护下的一套安全相关标准以及其他资源。包含在这套标准内的是用于表示配置基准以及顺应性测试的基于XML的语言。SCAP技术已经被用于顺应性测试计算机诸如政府发布的可携带计算机，并且已经被用于诸如网络交换机的数据处理系统的其他组件。
发明内容
数据处理系统可以是相对复杂的包含例如计算机、存储器设备或子系统、以及诸如交换机的网络组件的各种不同类型组件的集合。需要以有效的方式对这种复杂的数据处理系统进行顺应性测试。
尽管可以针对系统的单个组件诸如网络交换机而使用现有的顺应性测试技术，但是在这些现有的技术中存在缺点，这是由于这些现有的技术限制与单个组件一起使用，这使得该技术不适于测试具有复杂的区别的组件集合的系统。例如，这种现有的技术不能以自动的方式有效地捕捉不同组件间的依赖性。例如，一个测试可以被用于识别某些网络交换机以及其配置的存在，同时，另一个可以被用于识别计算服务器的配置。然而，在这两个配置之间可能要求关联，诸如，用于适当的互用性或安全性的相应软件组件或固件组件的要求的修正。这可能需要依赖于管理性的过程、由人实施的过程以表示和测试这种关系的满意度。
当使用复杂但定义明确的构件(building block)来部署数据处理系统时，可能会更多的被涉及上述困难。随着计算机技术向着更高水平的一体化发展，创造出诸如离散的构件的具有计算元件、存储器元件和网络元件的很大程度上一体化的计算机系统是可能的，这种计算机系统用于针对各种应用提供定义明确的且可扩展的计算机平台。因此，期望这种复杂的集成计算系统的有效自动测试。
公开了用于测试集成计算系统是否遵循预定的配置基准的方法和装置，该预定的配置基准被表示为第一组标记语言语句诸如XML中的规则的集合。集成计算系统包括不同类型的互联组件，这些互联组件的类型可以选自例如服务器类型、网络交换机类型、以及存储器子系统类型。
公开的方法包括解析规则以获得测试定义标识符，所述测试定义标识符识别第二组标记语言语句中的测试定义。每个测试定义包括测试值和系统的组件属性的属性标识符，其中该属性相对测试值的待测试的实际值，属性标识符识别系统组件的系统管理信息的集成对象模型中的对象。集成对象模型表示集成计算系统的所有组件中的物理关系和功能关系。因此对象模型以整体反映系统，对象模型使得能够统一访问关于所有组件的管理信息，以便使能它们之间关系的自动测试。
方法包括为第二组标记语言语句调用解释器。利用来自规则的测试定义标识符来调用该解释器，以处理对应的测试定义以便(a)使用测试定义的属性标识符访问管理数据库，从而获得对应的属性的实际值，并且(b)将获得的实际值与测试定义的测试值比较，从而产生指示属性是否遵循包含测试定义标识符的规则的比较结果值。比较结果值可被存储或作为顺应性指示符被传送给人类用户或机器用户。
附图说明
前面提到的以及其他的对象，特征和优点将通过本发明具体实施方式的下列描述而变得显然，如附图中所述，其中相同的参考符号指代遍及不同视角的相同部分。
图1是数据处理系统的框图；
图2是集成计算子系统的框图；
图3是系统管理子系统的框图；
图4是顺应性引擎的框图；
图5是顺应性测试的高层次流程图；
图6-9是表示测试基准和测试方法的标记语言语句的列表；以及
图10是计算机硬件的框图。
具体实施方式
图1示出包括一个或多个集成计算子系统(ICS)10的示例性数据处理系统，每个集成计算子系统通信耦合到系统管理子系统12。进一步如下所述，每个ICS 10包括硬件计算组件，这些硬件计算组件来自不同域的计算组件、网络组件和存储组件、以及诸如操作系统的系统软件组件和诸如系统管理程序(hypervisor)的虚拟软件。给定的系统可以利用尽可能多的ICS 10来支持给定的工作负荷，并且ICS 10可以随着时间逐渐被增加以支持增大的工作负荷。术语“集成”指的是为每个ICS 10中的计算组件的集合提供整体的(unitary)方面的逻辑/功能封装以及物理封装两者。例如，ICS 10可以被设计为使用一组具有预定位置以及组件的互联选项的一个或多个设备机架来部署(deploy)。进一步，ICS 10作为单元被测试、配置并且管理，并且可以作为单元遵从显式资质标准，从而使那些正在设计的大系统有把握以它们期望的性能将ICS10用作标准的构件块。在一个实施例中，ICS 10可以被实现为VCE公司销售的VBLOCKTM系统。
系统管理子系统12用于关于诸如配置、监控、测试等的ICS 10的系统管理任务。这种任务还可以被称为“维护和操作”或M&O活动。进一步如下所述，系统管理子系统12的一个显著的特征是其使用ICS 10中所有管理的组件的集成表示，具体地，这些所有管理的组件包括硬件资源和软件资源两者以及跨不同域的硬件资源。此外，系统管理子系统12包括可以被用于每个ICS 10的顺应性测试的结构和功能，诸如给定的ICS 10的实际配置是否遵循指定的基准(benckmark)配置。顺应性测试使用灵活、有效且强大的顺应性规则和顺应性测试的规范的集成表示。
图2示出ICS 10的示例结构。该ICS 10包括可以被称为“刀片式”服务器的一组服务器20，该“刀片式”服务器具有紧凑、模块化的形式用于准备包含到标准的设备机架中。ICS 10还包括存储子系统22，存储子系统22包括一组或多组存储设备或存储设备(例如，磁盘驱动器)的“阵列”以及相关联的存储控制器。ICS 10进一步包括被显示为集群互联24和存储器互联26的网络或互联电路。集群互联24提供了服务器10和包括局域网和/或广域网(LAN/WAN)28以及经由存储器互联26的存储器子系统22的系统的其他组件之间的高容量数据互联。存储器互联26提供了经由集群互联24的存储器子系统22和服务器20之间的面向存储(例如面向块)的高容量数据互联。ICS在某些实施例中可以被不同地结构化，这包括了那些采用可以不使用专用存储器互联26的网络附加存储器的实施方案。
尽管没有被描述在图2中，ICS的各种组件总体分别包括某种类型管理接口，该管理接口使外部管理应用或设备能够提供并获得组件专用管理信息。例如，用于实现互联24、26的网络交换机可以提供所谓的简单网络管理协议(SNMP)接口，该接口使得分离的SNMP管理应用能够针对操作的信息(例如，硬件状态指示符、网络流量计数器、事件信息等)询问交换机并且能够为定制操作(例如，配置信息、参数值)提供输入。某些管理协议提供了上报可能需要特定及时关注的异步事件。例如，SNMP包括用于这种事件上报的“捕获(trap)”消息/事务。系统管理子系统12被功能性地耦合到这些组件专用管理接口的每个接口。在某些情况下，耦合可以是直接的，即经由具体的组件专用连接，而在其他的情况下，可能存在潜在地提供其底层(多个)组件的某种程度的更加抽象的视图的中间组件管理器。
图3示出系统管理子系统12的示例结构。该系统管理子系统12包括监控器子系统30、数据库子系统32以及包括顺应性引擎34和可能地其他管理应用36的系统管理引擎/应用。如所示，监控器子系统30具有包括组件管理(CM)驱动器、发现协调器(discovery coordinator)、以及事件子系统的功能性组件。CM驱动器是被认定为“ICS COMP”的用于到ICS 10的组件的组件专用管理接口或协议专用管理接口。发现协调器责任发现过程，ICS 10的结构和状态通过发现过程变得已知并且相对应的系统信息成为被存储在数据库32中。事件子系统提供了事件(例如，SNMP捕获)的检测和上报以及提供了管理子系统12自身中的事件信令。下面描述了示例。
还如图3所示，数据库子系统32包括用于系统的集成对象模型(MO)管理数据库37，并且数据库子系统32调出(export)OM应用程序编程接口(API)38。管理应用34、36经由该OM应用程序编程接口(API)38获得存储在OM数据库37中的管理信息。在一个实施例中，OM API 38可以使用被称为表述性状态传递(REST)的分布式访问的协议。如本领域中公知的，REST API采用统一资源定位符(URL)和/或统一资源标识符(URI)以便指定作为REST命令和响应的主题的资源或对象。以下提供了OM数据库和OMAPI 38的某些细节。
顺应性引擎34是专业管理应用，其用于评估系统(具体地，每个ICS 10)是否遵循针对配置或设计和/或布置的其他方面的某些定义明确的规范。顺应性引擎34基于其使用OM API 38从数据库37获得的管理信息进行该评估。在下面给出了更多关于顺应性引擎34的细节以及顺应性引擎34的操作。如所示，顺应性引擎34还具有到监控器30，或者在某些情况下甚至直接到用于ICS 10的组件的组件管理器的一个或多个附加的接口40，以便得到由于某些原因不能经由数据库37和OM API 38获得的管理信息。
如所述，在一个实施例中，OM数据库37被结构化为一组对象或一组“资源”，并且OM API 38采用URL识别作为请求和响应的主题的资源。更具体地，OM API 38可以采用具有完整URL组的针对OM数据库37的所谓的表述性状态传递(REST)，从而获得在ICS 10上发现的完整物理模型上的数据。REST资源组可以根据XML类型的模式(schema)来组织。而剩余的说明具体的参考REST类型的实施方式。在替换的实施方案中，包括遵从简单对象访问协议(SOAP)的那些接口的其他类型的接口可以被使用。
下面是识别OM数据库37中的资源的URL的示例。在“织物(fabric)互联”的情况下，该资源是图1的集群互联24内的组件。在从针对涉及织物互联的某些测试的OVAL测试定义获得URL之后，该URL被包含在从顺应性引擎34被发送到OM数据库37的REST请求中：
http://localhost:port/om/computesystem/{computesystem id}/fabricinterconnects
下面是相应的REST响应的示例的部分。针对织物互联的信息被提供为一组标记值。针对织物互联对象的REST响应包括作为系统组件的针对每个单个织物互联装置的语句的标记段或语句的标记组、以及作为织物互联装置的属性的单个标记值(例如，如以下示例所示的其最后的操作状态)。在给定的对象语句组中，语句组可以是该URL可使用在单独的REST请求中以获得关于子组件的更具体的信息的子组件的URL。例如，织物互联包括被称为“织物模块”的电路模块，所以每个织物互联组包括相对应的针对此子对象的标记URL。
图4示出顺应性引擎34的示例性结构，其包括内容元件50和处理组件52。内容元件50包括指定请求的数据文件(REQ’T)54以及指定测试56的那些数据文件。如所示，这些内容元件可以根据使用在被称为可扩展性配置清单描述格式(XCCDF)和开放漏洞评估语言(OVAL)的顺应性测试中的某些标准而分别被组织。XCCDF和OVAL两者根据对应的XML模式使用可扩展标记语言(XML)。在一个实施例中，基于XCCDF的请求文件54可以使用标准的XCCDF模式用于定义共同代表配置基准的规则，系统相对配置基准被测试顺应性。更加详细的细节如下所述，基于OVAL的测试文件56可以采用更加定制的专用于与集成OM数据37和API 38一起使用的模式。如所示，从内容元件50提供的信息包括模式文档(doc)和内容文档两者，其中内容文档根据模式文档中所述的模式提供实际使用的信息。
在接下来的说明中，假设了使用XCCDF和OVAL的特定情况，因此元件54和56被称为XCCDF文件和OVAL文件56。这仅仅为了方便且易于理解并不被解释为限制性。
处理组件52包括相应的用于请求(XCCDF)文件54和测试(OVAL)文件56的解释器，其被分别示为XCCDF解释器58和OVAL解释器60。处理组件52还包括分离的控制组件(CNTL)62，该控制组件(CNTL)62将由处理组件52执行的操作的不同方面管理为单元。控制组件62包括顺应性API 64，客户端应用经由该顺应性API 64来配置、执行并且获得来自被称作“扫描”的顺应性测试操作单元的结果。OVAL解释器60包括OM API 38的请求者侧的实施方式，并且可以包括如上所述的其他的接口40。用于解析或解释XML的技术在本领域中是众所周知的并且可以被用于实现解释器58、60。事实上，在一个实施例中，可用的开源XCCDF解释器可以被使用。然而，定制OVAL模式的使用意味着OVAL解释器60将对应地被定制，从而现成的实施方式或开源的实施方式可能是不合适的。
图4包括从XCCDF解释器58到OVAL解释器60的箭头。这代表了由XCCDF内容54和OVAL内容56的相应功能产生的信息的逻辑流程。XCCDF内容54表示了以例如规则形式的配置请求，例如，但是XCCDF内容54不代表如何实际测试系统与规则的顺应性。顺应性测试的那个部分是由OVAL内容56来提供的—OVAL内容56参考系统组件和如OM DB 37中所表示的系统组件的参数以及待满足的具体的数字和/或逻辑条件指定了待执行的具体测试。XCCDF文件54中的规则包含了到对应的测试的参考(reference)，这些对应的测试被定义在OVAL文件56中且被实现在OVAL解释器60中。因此，部分操作将从解析的XCCDF规则中获得的测试参考传递到OVAL解释器60中，在OVAL解释器60中，测试参考被用于选择具体的OVAL测试并且被用于提供使用在测试中的比较值。下面给出了示例。
图5示出执行在高级别的顺应性测试中的功能的示例。在70处，XCCDF解释器58解析(多个)XCCDF文件，以便获得测试参考和比较值，其中测试参考识别被定义在OVAL内容56中的测试。在72处，利用从XCCDF文件54提取的测试参考和比较值来调用OVAL解释器60，以及在74处，OVAL解释器60初始化到OM DB 47的访问，从而获得实际属性值并且使用结果进行指定的测试。控制组件62提供可以被视为“胶连”逻辑的逻辑，以便实现以上总体操作，“胶连”逻辑连接由解释器58和60提供的功能。
图6-9提供了内容50的两个示例。图6是第一XCCDF文件54的片段(snippet)，并且图7相对应的OVAL文件56的片段。在该示例中，图6的XCCDF文件包括被称为PowerPath/VE的表示驱动器请求的版本的规则。这个规则包括涉及识别为“100”的变量以及在识别的OVAL文件中识别为“100”的定义的<check>组。图7示出具有定义100(接近顶部)和变量100(接近底部)的OVAL文件的内容。定义包括描述运算符(逻辑与)且识别测试(测试100)的<criteria>组，该测试进一步作为标记<esx_test>的组的出现在代码中。测试进而参考“对象”400和“状态”(100)，这进一步出现在代码的下方。<esx_object>组包括OM数据库37中的对象的定位器值，该OM数据库37包括关于系统中PowerPath/VE驱动器的信息(如果有的话)。在状态100是PowerPath版本的字符串(string)的情况下，<esx_state>组包括“状态”的定位器值或该对象的属性。这个组还指定了用于测试的待使用的变量(var.100)以及待执行的操作(模式匹配)。在操作中，OVAL解释器60和控制逻辑62使用这些值以经由OM API 38查询OM数据库37并且针对返回的结果执行模式匹配测试。在本文中没有描述对结果的记录以及其他使用。如本领域众所周知的，OVAL还支持其内容可以如期望的被分离处理从而将结果呈现给应用或系统用户的结果文件。
图8和图9表示没有被详细描述的另一个示例。在这种情况下，规则和测试针对网络交换机的操作状态，其中顺应结果与字符串“operable”相匹配。XCCDF内容(图8)识别将被用于(200)的请求(状态等于“operable”)以及OVAL定义，并且OVAL内容(图9)识别来自待测试的OM数据库37的对象和状态。
如上所述，本公开技术的一个优点在于有能力捕捉顺应性测试中的跨域依赖性，即用于指定并测试计算机资源、网络资源和存储器资源的所有或任何子集间的属性值的某些组合。在一个示例中，并未被示出，存在关于网络分段等级的规范以限制顺应性评估的范围。在这种情况下，OVAL标准被用于检查ICS 10中的网络(物理的或虚拟的)的分段，以自动地确定扫描通知范围内的评估(组件)(即，补块(patch)是否是最新的等)。
下面是说明使用OVAL编码的这种依赖性的示例。在这种情况下，如果两个状态中的任意一个为真，则测试被满足。第一条件是网络片段1在扫描的“范围内”(即，被包含在扫描中)并且补块附加到网络片段的服务器上，该补块是最新的。第二条件是网络片段1不在扫描的范围内，即不被测试为扫描的部分。“在扫描范围内”是网络片段的属性，而“最新的补块”是被连接到网络分段的虚拟服务器(计算软件组件)的属性。
现在回到图4，顺应性API 64可以用于控制由顺应性引擎34执行的顺应性扫描的所有方面，顺应性扫描包括例如按照人类用户或机器用户的需求开始扫描。然而期望自动化这种控制的某些方面，具体来说，期望使用响应于在系统中一个或多个指定事件的出现而开始的“事件初始化的”扫描。事件驱动的活动可以利用由监控器30的上述事件子系统提供的设施，事件驱动的活动可以按照例如Java消息队列的形式来实施。例如，事件初始化的扫描的一个使用是作为可以通过监控器30检测到的系统配置中的变化的响应。在这种情况下，监控器30检测变化并且创建对应的事件。顺应性引擎34被配置为监听这种事件，并且在检测到该事件之后，顺应性引擎34初始化顺应性扫描。在某些情况下，顺应性扫描可以是完全的系统顺应性扫描，而在其他情况下，顺应性扫描可以是更为关注的并且具体针对触发该扫描的变化的扫描。这类操作的示例是添加或移除诸如服务器20的硬件组件。
图10示出从计算机硬件角度来看的物理计算机的示例配置。在一个实施例中，系统管理子系统12可以被实现为具有一个或多个物理计算机的区别的物理计算平台。在其它实施例中，可以使用虚拟机组织来实现系统管理子系统12，在虚拟机组织中，系统管理子系统12的组件被部署在物理计算机的一个或多个虚拟机的执行环境中。在后一种情况下，系统管理子系统12可以包括其管理的ICS 10的计算机硬件，即服务器20。
现在参考图10，物理计算机硬件包括一个或多个处理器80、内存82、以及由诸如一个或多个高速数据总线的数据互联86互联的接口电路84。接口电路84为外部互联和其他外部设备/连接(EXT DEV)提供硬件连接。具有连接的内存82的处理器80在本文中还可以被称为“处理电路”。在操作中，内存82存储系统软件(例如操作系统)的数据和指令以及一个或多个应用程序，该一个或多个应用程序通过(多个)处理器80来执行从而使得硬件以软件定义的方式来作用。因此，如本文中所述的执行管理应用的指令的计算机硬件可以被称为管理电路或管理组件，并且将认识到，当一组或多组计算机处理硬件执行了与本领域公知的不同的计算机程序时，这种电路或组件的集合都可以被实现并且彼此互连。
虽然本发明的各种实施例已被具体示出和描述，但本领域技术人员将理解在不偏离由随附权利要求限定的本发明范围的情况下，可以对本文的形式和细节做出各种修改。
虽然在上述描述中，各种组件都被特定地包含在了各自的ICS 10中，但在可替代实施例中，某些组件可以不受任何具体的ICS 10的约束，并且可以在操作(fly)中从资源供应虚拟机。
例如，可以以不同的方式来实现系统管理子系统12，特别是使用替代方式或补充方式以便获得和/或存储管理信息。一些或所有的管理信息可被保持在内存中的数据结构中，而不是被保持在通常驻留在辅助存储器类型的数据库中。此外，如所指示的，顺应性引擎34可以利用除了OM API 38以外的分离的接口以访问管理信息。
一个具体使用场景可以是在主机租用(host-tenant)环境中，其中一组租用组织的不同的应用和/或虚拟机在被主机提供的硬件资源上执行。在这种类型的系统中，一个或多个租户可以相对其所使用的组件(软件和/或硬件)运行其自己的顺应性引擎，同时主机组织还运行顺应性引擎，顺应性引擎不仅检查“共有”(不是租户专用的)组件，同时还向租户的顺应性引擎询问其顺应性状态。这种询问可以越过专用接口，其中顺应性引擎34通过该专用接口连接到其他的顺应性引擎。
在另一种场景下，顺应性引擎34可以检查其请求的数据是否在数据库(OM DB 37)中，如果数据不在数据库中，则使用某些替代装置以提取用于评估的数据。例如，系统组件在数据库/对象模型中可能是不被支持的，但是其具有待测试的用于兼容评估的属性(例如，还没有被包含于对象模型中的逻辑配置、或简单的设置)。
上述给出的示例使用基于XML的语言，然而在其他实施例中，其他类型的标记语言也是可以使用的。
此外，还存在各种各样的其它类型的系统组件，包括在如本文所述的顺应性测试的范围内的软件类型。软件类型的具体示例是系统管理程序和运行在系统管理程序或直接运行在服务器20上的操作系统或应用。针对这种组件的上下文(context)与顺应性评估相关是常见的情况。例如，可以要求来自不同客户端的不同的工作负荷(应用)执行在不同物理服务器20上，这可以被视为硬件类型的组件与软件类型组件之间要求的关系。在不同软件类型组件之间要求的关系的示例中，可以要求某些类型的应用运行在具有具体配置的系统管理程序上。除了上述的一类关注硬件的信息，针对顺应性的测试还要求上下文信息。
还应当注意的是，内容50可以具有相对静态或更动态的性质。在一种情况下，参考配置可以被定义且在很长的时间内(数月或数年)适用于大量的系统。在这种情况下，创建XCCDF和OVAL文件54、56中代表的一个或多个基准，并利用在多个系统中的这些文件而无需修改就变得有意义。这是静态基准的一个示例。在其他情况下，具体的系统中的处理52或另一个处理可以在开始扫描之前被用于定制比较值和/或整个规则。例如，默认规则可能要求系统中的所有的密码的长度至少为12个字符。系统管理器可能将该比较值变化为例如“14”或“10”，这可能是与具体的环境或公司标准更加一致的。这是更加定制化的或动态的基准的例子。

Claims (20)

1.一种测试集成计算系统是否遵循预定的配置基准的方法，所述预定的配置基准被表示为第一组标记语言语句中的规则的集合，所述集成计算子系统包括选自服务器类型、网络交换机类型以及存储器子系统类型中的两个或更多个的不同类型的互联组件，所述方法包括：
解析所述规则以获得测试定义标识符，所述测试定义标识符识别第二组标记语言语句中的相应测试定义，每个测试定义包括测试值和组件的属性的属性标识符，所述属性具有相对所述测试值的待测试的实际值，所述属性标识符是针对所述组件的系统管理信息的对象模型中的对象标识符，所述对象模型表示所述集成计算系统的所述组件之间的物理关系和功能关系；
针对所述第二组标记语言语句调用解释器，利用来自每个规则的所述测试定义标识符来调用所述解释器，以处理对应的测试定义以便(a)使用所述测试定义的所述属性标识符访问所述对象模型，从而获得对应的属性的所述实际值，并且(b)将获得的实际值与所述测试定义的所述测试值比较从而产生指示所述属性是否遵循包含所述测试定义标识符的规则的比较结果值；以及
存储所述比较结果值或将所述比较结果值作为顺应性指示符传送给人类用户或机器用户。
2.根据权利要求1所述的方法，其中所述对象模型是存储所述组件的所述系统管理信息的管理数据库的集成对象模型组织。
3.根据权利要求2所述的方法，其中所述管理数据库提供表述性状态传递接口，通过所述表述性状态传递接口来获得所述系统管理信息，并且其中所述属性标识符是针对所述组件和其各自的属性的定义在所述表述性状态传递接口中的资源定位器值的结构化组中的一资源定位器值，该资源定位器值被用在所述表述性状态传递接口的请求消息中，并且所述属性值被返回在所述表述性状态传递接口的对应的响应消息中。
4.根据权利要求3所述的方法，其中所述属性值被返回为所述响应消息的一组标记语言语句中的多个标记值中的一个，该组标记语言语句包括具有针对所述系统的相关组件的各自资源定位器值的一个或多个语句。
5.根据权利要求1所述的方法，其中解析所述规则包括针对所述第一组标记语言语句调用第一解释器以获得所述测试定义标识符。
6.根据权利要求5所述的方法，进一步包括：
提供顺应性应用编程接口，由外部人类用户或机器用户通过所述顺应性应用编程接口来启动所述测试，并且所述比较结果值通过所述顺应性应用编程接口被存储或传送。
7.根据权利要求1所述方法，其中至少一个所述测试定义包括多个属性标识符和对应的测试值以及表示逻辑关系的标准，该逻辑关系表示其中所述系统遵循对应的规则的两个或更多个区别的顺应性条件。
8.根据权利要求7所述的方法，其中第一条件是在各自的组件和属性上的两个区别的测试的逻辑与条件，并且第二条件是针对所述组件和所述组件的属性中的一个的第三测试。
9.根据权利要求8所述的方法，其中所述第一条件包括组件在顺应性扫描范围中的第一测试以及所述组件的属性具有所述顺应性扫描的要求值的第二测试，并且所述第二条件是所述组件不在所述顺应性扫描的范围中。
10.根据权利要求1所述的方法，其中至少一个所述测试定义包括多个属性标识符和对应的测试值以及表示所述对应的属性和所述系统遵循所述对应的规则所要求的实际值之间的逻辑关系的标准。
11.根据权利要求10所述的方法，其中所述属性是相应的不同类型的组件的属性。
12.根据权利要求11所述的方法，其中所述组件中的一个的类型选自所述网络类型和存储器类型，并且其他组件是所述服务器类型。
13.根据权利要求1所述的方法，其中：
所述服务器类型、网络交换机类型和存储器子系统类型是硬件类型；
所述互联组件的不同类型包括系统管理程序类型和操作系统中的一个或两个或应用类型作为软件类型；
所述规则包括指定硬件类型组件和软件类型组件之间的要求的关系的关系规则，并且所述第二组标记语言语句中的所述测试定义包括表示遵循所述关系规则的测试的对应的关系测试定义。
14.根据权利要求1所述的方法，其中：
所述互联组件的不同类型包括系统管理程序类型与操作系统两者或应用类型作为软件类型；
所述规则包括指定系统管理程序类型组件和操作系统或应用类型组件之间的要求关系的关系规则，并且所述第二组标记语言语句中的所述测试定义包括表示遵循所述关系规则的测试的对应的关系测试定义。
15.一种计算机可读介质，其存储可由计算机化设备执行的一组计算机指令，从而使得所述计算机化设备执行根据权利要求1所述的方法。
16.根据权利要求15所述的一种计算机可读介质，其中所述对象模型是存储所述组件的所述系统管理信息的管理数据库的集成对象模型组织。
17.根据权利要求16所述的计算机可读介质，其中所述管理数据库提供表述性状态传递接口，通过所述表述性状态传递接口获得所述系统管理信息，并且其中所述属性标识符是针对所述组件和所述组件各自的属性定义在所述表述性状态传递接口中的资源定位器值的结构化组中的一资源定位器值，该资源定位器值被用在所述表述性状态传递接口的请求消息中，并且所述属性值被返回在所述表述性状态传递接口的对应的响应消息中。
18.根据权利要求17所述的计算机可读介质，其中所述属性值被返回为所述返回消息的一组标记语言语句中的多个标记值中的一个，该组标记语言语句包括具有所述系统的相关组件的各自资源定位器值的一个或多个语句。
19.根据权利要求15所述的计算机可读介质，其中解析所述规则包括针对所述第一组标记语言语句调用第一解释器以获得所述测试定义标识符。
20.一种系统，其用于测试集成计算系统是否遵循预定的配置基准，所述预定的配置基准被表示为第一组标记语言语句中的规则的集合，所述集成计算系统包括选自服务器类型、网络交换机类型以及存储器子系统类型中的两个或更多个的不同类型的互联组件，所述系统包括：
用于解析所述规则以获得测试定义标识符的装置，所述测试定义标识符识别第二组标记语言语句中的相应测试定义，每个测试定义包括测试值和组件的属性的属性标识符，所述属性具有相对所述测试值的待测试的实际值，所述属性标识符是针对所述组件的系统管理信息的对象模型中的对象标识符，所述对象模型表示所述集成计算系统的所述组件之间的物理关系和功能关系；
用于针对所述第二组标记语言语句调用解释器的装置，利用来自每个规则的所述测试定义标识符来调用所述解释器，以处理对应的测试定义以便(a)使用所述测试定义的所述属性标识符访问所述对象模型，从而获得对应的属性的所述实际值，并且(b)将获得的实际值与所述测试定义的所述测试值比较从而产生指示所述属性是否遵循包含所述测试定义标识符的规则的比较结果值；以及
用于存储所述比较结果值或将所述比较结果值作为顺应性指示符传送给人类用户或机器用户的装置。
CN201380055731.XA 2012-08-24 2013-08-23 用于集成计算系统的顺应性测试引擎 Pending CN104756085A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261693221P 2012-08-24 2012-08-24
US61/693,221 2012-08-24
US13/729,488 US9065746B2 (en) 2012-08-24 2012-12-28 Compliance testing engine for integrated computing system
US13/729,488 2012-12-28
PCT/US2013/056443 WO2014031988A1 (en) 2012-08-24 2013-08-23 Compliance testing engine for integrated computing system

Publications (1)

Publication Number Publication Date
CN104756085A true CN104756085A (zh) 2015-07-01

Family

ID=50149027

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201380055815.3A Pending CN104756443A (zh) 2012-08-24 2013-08-23 使用通用对象实例管理融合信息技术基础设施
CN201380055731.XA Pending CN104756085A (zh) 2012-08-24 2013-08-23 用于集成计算系统的顺应性测试引擎

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201380055815.3A Pending CN104756443A (zh) 2012-08-24 2013-08-23 使用通用对象实例管理融合信息技术基础设施

Country Status (7)

Country Link
US (4) US9065746B2 (zh)
EP (2) EP2888836A1 (zh)
JP (2) JP2015529361A (zh)
CN (2) CN104756443A (zh)
AU (2) AU2013305596A1 (zh)
CA (2) CA2882659A1 (zh)
WO (2) WO2014031988A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107534569A (zh) * 2015-11-18 2018-01-02 慧与发展有限责任合伙企业 融合系统符合性检查

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9065746B2 (en) * 2012-08-24 2015-06-23 Vce Company, Llc Compliance testing engine for integrated computing system
US9959200B2 (en) 2012-09-06 2018-05-01 Red Hat Israel, Ltd. User interface for composing test scenarios
US9218269B2 (en) * 2012-09-07 2015-12-22 Red Hat Israel, Ltd. Testing multiple target platforms
US9195379B2 (en) * 2012-10-17 2015-11-24 Cisco Technology, Inc. Automated techniques to bootstrap a converged infrastructure (CI) based on a CI package design unit
US10244080B2 (en) * 2013-03-15 2019-03-26 VCE IP Holding Company LLC Accessing multiple converged IT infrastructures
US20140372604A1 (en) * 2013-05-24 2014-12-18 Connectloud, Inc. Method and apparatus to map service offerings to catalog categories
US20150066703A1 (en) * 2013-08-27 2015-03-05 Connectloud, Inc. Method and apparatus for categorizing service offerings and displaying them on a visual canvas
US20150066668A1 (en) * 2013-08-27 2015-03-05 Connectloud, Inc. Method and apparatus for displaying storage service offerings in a service catalog
US20150066709A1 (en) * 2013-08-27 2015-03-05 Connectloud, Inc. Method and apparatus for displaying compute service offerings in a service catalog
US20150066667A1 (en) * 2013-08-27 2015-03-05 Connectloud, Inc. Method and apparatus for displaying network service offerings in a service catalog
US9483281B2 (en) 2013-09-16 2016-11-01 VCE IP Holding Company LLC Methods, systems, and computer readable mediums for updating components in a converged infrastructure system
US9389991B1 (en) * 2013-09-16 2016-07-12 Vce Company, Llc Methods, systems, and computer readable mediums for generating instruction data to update components in a converged infrastructure system
US10176005B2 (en) 2014-03-31 2019-01-08 Cypherpath, Inc. Environment virtualization
US10270735B2 (en) 2014-10-10 2019-04-23 Microsoft Technology Licensing, Llc Distributed components in computing clusters
US10686659B1 (en) * 2014-11-07 2020-06-16 EMC IP Holding Company LLC Converged infrastructure logical build optimization
CN107111490A (zh) * 2014-12-19 2017-08-29 谢尔盖·阿纳托利耶维奇·格瑞斯尼 功能约束数据的管理系统和方法
US10587465B1 (en) 2015-02-19 2020-03-10 VCE IP Holding Company LLC Methods, systems, and computer readable mediums for selecting and configuring a computing system to support a replicated application
US10379829B2 (en) * 2015-02-26 2019-08-13 Blackberry Limited System and method for restricting system and application software available for installation on a managed mobile device
US10069938B1 (en) * 2015-03-30 2018-09-04 EMC IP Holding Company LLC Returning identifiers in default query responses
CN106484381B (zh) * 2015-08-31 2020-01-31 华为技术有限公司 一种数据中心模型、信息处理方法和装置
US9830082B1 (en) 2015-09-08 2017-11-28 EMC IP Holding Company LLC Hybrid hyper-converged infrastructure and storage appliance
US9778865B1 (en) 2015-09-08 2017-10-03 EMC IP Holding Company LLC Hyper-converged infrastructure based on server pairs
US9928097B1 (en) * 2015-09-14 2018-03-27 VCE IP Holding Company LLC Methods, systems, and computer readable mediums for defining and updating a virtual computing system comprising distributed resource components
US9778956B1 (en) 2015-09-24 2017-10-03 EMC IP Holding Company LLC Multi-dimensional scheduling in converged infrastructure
CN108351626B (zh) * 2015-11-02 2020-12-04 Abb瑞士股份有限公司 用于自动化系统配置的系统和方法
US10168884B2 (en) 2015-11-10 2019-01-01 International Business Machines Corporation Generating user interface configuration pages to configure a computing resource comprised of component computing resources
US10338934B1 (en) * 2016-03-28 2019-07-02 VCE IP Holding Company LLC Inter-object validation system and method using chained specialized configuration applications
US10027596B1 (en) * 2016-04-27 2018-07-17 EMC IP Holding Company LLC Hierarchical mapping of applications, services and resources for enhanced orchestration in converged infrastructure
US10223235B2 (en) 2016-05-26 2019-03-05 International Business Machines Corporation Comprehensive testing of computer hardware configurations
US10216599B2 (en) 2016-05-26 2019-02-26 International Business Machines Corporation Comprehensive testing of computer hardware configurations
US10205738B2 (en) * 2016-07-12 2019-02-12 Cisco Technology, Inc. Advanced persistent threat mitigation
US10664551B2 (en) * 2016-07-25 2020-05-26 American Megatrends International, Llc Intuitive user interface (UI) for device or vendor independent network switch management via embedded management controller
US10135874B1 (en) 2016-11-16 2018-11-20 VCE IP Holding Company LLC Compliance management system and method for an integrated computing system
US11106639B1 (en) 2016-12-05 2021-08-31 EMC IP Holding Company LLC Methods, systems, and computer readable mediums for performing metadata-driven data collection
US10417013B1 (en) 2016-12-14 2019-09-17 VCE IP Holding Company LLC Configuration system and method for individual hierarchally modeled sub-systems of an integrated computing system
US20180314531A1 (en) * 2017-04-28 2018-11-01 VCE IP Holding Company LLC Dependency resolution system and method for an integrated computing system
US10977163B1 (en) 2017-04-28 2021-04-13 EMC IP Holding Company LLC Test management system and method for an integrated computing system
EP3457286B1 (en) * 2017-09-14 2022-07-13 ABB Schweiz AG Method and computing device for commissioning an industrial automation control system
US11580419B2 (en) 2018-05-18 2023-02-14 Kyndryl, Inc. Computer environment infrastructure compliance audit result prediction
CN108961897A (zh) * 2018-07-04 2018-12-07 北京四航科技有限公司 一种虚拟学习系统及方法
WO2021189229A1 (en) 2020-03-24 2021-09-30 Citrix Systems, Inc. Inter-application relevance management for application virtualization platform
US11500683B2 (en) 2020-10-29 2022-11-15 Dell Products L.P. Workload compliance governor system
CN113010358B (zh) * 2021-03-17 2022-09-30 北京航空航天大学 应用于航空电子系统的ltpb总线检测装置及其测试流程描述语言的方法
CN113190629B (zh) * 2021-04-25 2024-05-31 国能智深控制技术有限公司 一种生产监控管理系统的实现方法和装置
US11928012B2 (en) * 2021-10-06 2024-03-12 Heinle Solutions Inc. Methods, systems, and media for scalable verification of compute cluster configurations

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060026463A1 (en) * 2004-07-28 2006-02-02 Oracle International Corporation, (A California Corporation) Methods and systems for validating a system environment
US7757121B1 (en) * 2006-04-21 2010-07-13 Cydone Solutions Inc. Requirement driven interoperability/compliance testing systems and methods
US20110239055A1 (en) * 2010-03-24 2011-09-29 Microsoft Corporation Validating configuration of distributed applications

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6549943B1 (en) 1999-06-16 2003-04-15 Cisco Technology, Inc. Network management using abstract device descriptions
US6944654B1 (en) * 1999-11-01 2005-09-13 Emc Corporation Multiple storage array control
US7096502B1 (en) * 2000-02-08 2006-08-22 Harris Corporation System and method for assessing the security posture of a network
US6996517B1 (en) * 2000-06-06 2006-02-07 Microsoft Corporation Performance technology infrastructure for modeling the performance of computer systems
US6901346B2 (en) * 2000-08-09 2005-05-31 Telos Corporation System, method and medium for certifying and accrediting requirements compliance
US6916141B2 (en) * 2002-07-05 2005-07-12 Leslie John Owen Three dimensional tool guide
US8019849B1 (en) * 2002-09-13 2011-09-13 Symantec Operating Corporation Server-side storage area network management interface
US7454487B1 (en) 2002-12-31 2008-11-18 Emc Corporation Methods and apparatus providing an extensible manageable entity model for a network
US7197489B1 (en) 2002-12-31 2007-03-27 Emc Corporation Methods and apparatus for maintaining object data for components in a network
US7627891B2 (en) * 2003-02-14 2009-12-01 Preventsys, Inc. Network audit and policy assurance system
US7072807B2 (en) * 2003-03-06 2006-07-04 Microsoft Corporation Architecture for distributed computing system and automated design, deployment, and management of distributed applications
US7409587B2 (en) * 2004-08-24 2008-08-05 Symantec Operating Corporation Recovering from storage transaction failures using checkpoints
US7234093B2 (en) * 2003-09-30 2007-06-19 Sudhir Dattaram Kadkade Resource management during system verification
JP3839820B2 (ja) 2004-04-21 2006-11-01 株式会社エヌ・ティ・ティ・ドコモ データ通信装置およびデータ通信方法
RU2004138685A (ru) * 2004-12-29 2006-06-10 Общество с ограниченной ответственностью "Активное Видео" (RU) Способ (варианты) и система обработки мультимедийной информации и способ формирования назначаемой области (варианты)
US7810159B2 (en) * 2005-06-14 2010-10-05 At&T Intellectual Property I, L.P. Methods, computer networks and computer program products for reducing the vulnerability of user devices
US7689602B1 (en) * 2005-07-20 2010-03-30 Bakbone Software, Inc. Method of creating hierarchical indices for a distributed object system
US8635594B1 (en) * 2006-03-30 2014-01-21 Emc Corporation Script language for storage management operations
US8065660B1 (en) 2006-05-12 2011-11-22 Cisco Technology, Inc. Method and system for run-time customization of network management applications
US7822594B2 (en) * 2006-08-07 2010-10-26 Voltaire Ltd. Service-oriented infrastructure management
US9172611B2 (en) * 2006-09-01 2015-10-27 Spirent Communications, Inc. System and method for discovering assets and functional relationships in a network
US9361264B2 (en) 2007-10-15 2016-06-07 International Business Machines Corporation Systems and methods for access and control of hardware device resources using device-independent access interfaces
US8707385B2 (en) * 2008-02-11 2014-04-22 Oracle International Corporation Automated compliance policy enforcement in software systems
US9078095B2 (en) * 2008-03-14 2015-07-07 William J. Johnson System and method for location based inventory management
WO2009123694A2 (en) 2008-03-31 2009-10-08 Packetvideo Corp. System and method for managing, controlling and/or rendering media in a network
US9225610B2 (en) * 2008-03-31 2015-12-29 Hitachi, Ltd. User interface providing information system topology presentation
US8166552B2 (en) * 2008-09-12 2012-04-24 Hytrust, Inc. Adaptive configuration management system
US8261354B2 (en) * 2008-09-17 2012-09-04 International Business Machines Corporation System, method and program product for dynamically performing an audit and security compliance validation in an operating environment
US20110055134A1 (en) * 2009-08-25 2011-03-03 Martin Dvorak Dynamic resource-based web service evaluation
CN102812573B (zh) 2010-03-23 2015-09-30 默克专利有限公司 用于有机电致发光器件的材料
FR2959089B1 (fr) 2010-04-16 2012-08-03 Inst Nat Rech Inf Automat Outil de gestion de ressources et d'infrastructures informatiques et reseaux
US8140899B2 (en) * 2010-05-24 2012-03-20 Hewlett-Packard Development Company, L.P. Method and system for diagnosing a computer system
US20130110799A1 (en) 2011-10-31 2013-05-02 Sally Blue Hoppe Access to heterogeneous data sources
US8627275B1 (en) 2011-12-30 2014-01-07 Emc Corporation Technique for acquiring data storage metrics
US9065746B2 (en) * 2012-08-24 2015-06-23 Vce Company, Llc Compliance testing engine for integrated computing system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060026463A1 (en) * 2004-07-28 2006-02-02 Oracle International Corporation, (A California Corporation) Methods and systems for validating a system environment
US7757121B1 (en) * 2006-04-21 2010-07-13 Cydone Solutions Inc. Requirement driven interoperability/compliance testing systems and methods
US20110239055A1 (en) * 2010-03-24 2011-09-29 Microsoft Corporation Validating configuration of distributed applications

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CYBEX CORRESPONDENCE GROUP: ""Draft Recommendation ITU-T X.xccdf, Configuration checklist description format"", 《INTERNATIONAL TELECOMMUNICATION UNION,TELECOMMUNICATION STANDARDIZATION SECTOR,STUDY PERIOD 2009-2012》 *
MOHAMMED NORADEN ALSALEH等: ""SCAP Based Configuration Analytics for Comprehensive Compliance Checking"", 《2011 4TH SYMPOSIUM ON CONFIGURATION ANALYTICS AND AUTOMATION(SAFECONFIG)》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107534569A (zh) * 2015-11-18 2018-01-02 慧与发展有限责任合伙企业 融合系统符合性检查

Also Published As

Publication number Publication date
US9065746B2 (en) 2015-06-23
US20150324277A1 (en) 2015-11-12
AU2013305593A1 (en) 2015-03-05
US9083625B2 (en) 2015-07-14
US9459995B2 (en) 2016-10-04
WO2014031991A1 (en) 2014-02-27
US10394703B2 (en) 2019-08-27
CA2882660A1 (en) 2014-02-27
CN104756443A (zh) 2015-07-01
EP2888836A1 (en) 2015-07-01
US20140059385A1 (en) 2014-02-27
US20140059570A1 (en) 2014-02-27
EP2888665A1 (en) 2015-07-01
JP2015526822A (ja) 2015-09-10
WO2014031988A1 (en) 2014-02-27
JP2015529361A (ja) 2015-10-05
AU2013305596A1 (en) 2015-03-05
CA2882659A1 (en) 2014-02-27
US20140059196A1 (en) 2014-02-27

Similar Documents

Publication Publication Date Title
CN104756085A (zh) 用于集成计算系统的顺应性测试引擎
CN110535831B (zh) 基于Kubernetes和网络域的集群安全管理方法、装置及存储介质
US8122111B2 (en) System and method for server configuration control and management
CN110971614A (zh) 物联网适配方法、系统、计算机设备及存储介质
US7467372B2 (en) Device configuration and management development system
US7734637B2 (en) Method and system for automatic detection of monitoring data sources
CN111181943A (zh) 基于业务中台的服务交互方法、装置、计算机设备及计算机存储介质
CN112231168A (zh) 微服务器管控方法、装置、设备及存储介质
CN105224441B (zh) 虚拟机信息采集装置、方法及虚拟机信息维护方法和系统
CN103685608A (zh) 一种自动配置安全虚拟机ip地址的方法及装置
US9772834B2 (en) Exportable encoded identifications of networked machines
US8327324B1 (en) Message logging system
US20080005305A1 (en) Method and apparatus for providing a consolidated namespace to client applications in multi-tenant common information model (CIM) environments
CN113094674A (zh) 页面展示方法、装置、电子设备及存储介质
US20220214928A1 (en) Workload Configuration Extractor
CN110377324B (zh) 一种信息化平台监控系统和构建方法
CN114138483B (zh) 一种虚拟化资源管理方法、装置、服务器、系统及介质
CN113286014B (zh) 基础域名的动态配置方法、装置及相关设备
CN112068953B (zh) 一种云资源精细化管理溯源系统及方法
CN114039751A (zh) 一种网络动态感知装置、系统和方法
CN113656378A (zh) 一种服务器管理方法、装置、介质
CN106990990B (zh) 基于资源配置驱动库的资源动态维护系统
CN117793127A (zh) 操作命令生成方法、微服务架构通讯方法及微服务系统
CN115801588A (zh) 网络连接的动态拓扑处理方法及系统
CN105608372B (zh) 一种检测应用被杀毒软件报毒的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150701