WO2018174223A1 - 運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを格納した非一時的なコンピュータ可読媒体 - Google Patents

運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを格納した非一時的なコンピュータ可読媒体 Download PDF

Info

Publication number
WO2018174223A1
WO2018174223A1 PCT/JP2018/011590 JP2018011590W WO2018174223A1 WO 2018174223 A1 WO2018174223 A1 WO 2018174223A1 JP 2018011590 W JP2018011590 W JP 2018011590W WO 2018174223 A1 WO2018174223 A1 WO 2018174223A1
Authority
WO
WIPO (PCT)
Prior art keywords
test
update
configuration information
target system
management server
Prior art date
Application number
PCT/JP2018/011590
Other languages
English (en)
French (fr)
Inventor
功一 吉田
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US16/494,636 priority Critical patent/US11500760B2/en
Priority to CN201880019688.4A priority patent/CN110447018B/zh
Priority to JP2019507007A priority patent/JP6835207B2/ja
Priority to EP18770987.8A priority patent/EP3605339A4/en
Publication of WO2018174223A1 publication Critical patent/WO2018174223A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3664—Environments for testing or debugging software
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/26—Functional testing
    • G06F11/263—Generation of test inputs, e.g. test vectors, patterns or sequences ; with adaptation of the tested hardware for testability with external testers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3684—Test management for test design, e.g. generating new test cases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/368—Test management for test version control, e.g. updating test cases to a new software version
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites

Definitions

  • the present invention relates to an operation management server, a development operation support system, and methods and programs thereof, and more particularly, to an operation management server that uses a configuration management database, a development operation support system, methods and programs thereof.
  • CMDB Configuration Management Database
  • IT Information Technology
  • DevOps Development & Operations
  • operation work for applying information created by development or design to an actual system and operating the system.
  • Patent Documents 1 and 2 are known as related technologies.
  • Patent Document 1 describes a technique for recording a manufacturing history of a product such as an article
  • Patent Document 2 describes a technique for performing process management using an RFID tag.
  • the present invention has been made in view of such problems, and an object thereof is to provide an operation management server, a development operation support system, and a method and program thereof that can easily execute a system test.
  • the operation management server includes an associating unit that associates an update content of configuration information in the configuration management database and a test scenario corresponding to the update content, and a target system according to the update content of the configuration information in the configuration management database.
  • a setting unit configured to set; and a test execution unit configured to execute a system test on the set target system based on a test scenario associated with the update content.
  • the development operation support system is a development operation support system including a development management server, an operation management server, and a configuration management database, wherein the development management server updates the configuration information of the configuration management database.
  • An association unit that associates in advance the update contents of the configuration information in the configuration management database and the test scenario corresponding to the update contents, and according to the update contents of the configuration information in the configuration management database
  • a setting unit configured to set a target system; and a test execution unit configured to execute a system test on the set target system based on a test scenario associated with the update content.
  • the operation management method relates the update contents of the configuration information in the configuration management database and the test scenario corresponding to the update contents, sets the target system according to the update contents of the configuration information in the configuration management database, A system test is executed on the set target system based on the test scenario associated with the update content.
  • a development operation support method is a development operation support method in a development operation support system provided with a configuration management database, wherein the configuration information of the configuration management database is updated, and the updated contents of the configuration information of the configuration management database And a test scenario corresponding to the update content, the target system is set according to the update content of the configuration information in the configuration management database, and the set based on the test scenario associated with the update content A system test is executed on the target system.
  • the operation management program relates the update contents of the configuration information in the configuration management database and the test scenario corresponding to the update contents, sets the target system according to the update contents of the configuration information in the configuration management database, Based on the test scenario associated with the update content, the computer is caused to execute a process of executing a system test on the set target system.
  • the development operation support program updates the configuration information of the configuration management database, associates the updated content of the configuration information of the configuration management database with a test scenario corresponding to the updated content in advance, and configures the configuration of the configuration management database
  • a target system is set according to the update content of the information, and a system test is executed on the set target system based on the test scenario associated with the update content, and the computer is caused to execute the process.
  • an operation management server it is possible to provide an operation management server, a development operation support system, and a method and program thereof that can easily execute a system test.
  • FIG. 1 is a configuration diagram illustrating a configuration example of a development and operation support system according to Embodiment 1.
  • FIG. 4 is a flowchart illustrating an operation example of the development and operation support system according to the first embodiment.
  • 6 is a diagram illustrating an example of data stored in a database according to Embodiment 1.
  • FIG. 6 is a diagram illustrating an example of data stored in a database according to Embodiment 1.
  • FIG. 1 is an explanatory diagram for explaining a concept of a development and operation support system according to Embodiment 1.
  • FIG. 1 is an explanatory diagram for explaining a concept of a development and operation support system according to Embodiment 1.
  • FIG. 1 shows a configuration of a development operation support system of a basic example.
  • the development operation support system 200 of the basic example includes a development management server 1, an operation management server 2, a CMDB 3, and a target system 4.
  • CMDB 3 is a database that stores configuration information of the target system 4.
  • the development management server 1 updates the configuration information of the CMDB 3 according to information input from the developer.
  • the operation management server 2 applies the configuration information of the CMDB 3 to the target system 4 according to an instruction input from the operator.
  • Fig. 2 shows a general system development flow. As shown in FIG. 2, in general, when providing an IT system to an end user, the work proceeds in the order of a planning process (S101), a development process (S102), an operation process (S103), and a maintenance process (S104).
  • S101 planning process
  • S102 development process
  • S103 operation process
  • S104 maintenance process
  • a developer such as an SE (System Engineer) performs requirement definition according to the end user's request and determines the specifications of the target system 4.
  • SE System Engineer
  • the developer creates (coding) the configuration information of the target system 4 in accordance with the requirements definition specifications.
  • the developer accesses the development management server 1 using a development terminal or the like, and registers (updates) the configuration information of the target system 4 in the CMDB 3.
  • the operator accesses the operation management server 2 using an operation terminal or the like, and applies the configuration information of the CMDB 3 to the target system 4. Further, in the maintenance process (S104), the operator accesses the operation management server 2 to monitor the status of the target system 4 and deal with the problem. When the operator constructs, expands, or modifies the system, the operator applies the updated configuration information of the CMDB 3 to the target system 4 and performs necessary test work.
  • the operator needs to test the target system.
  • the configuration information and the system to be tested are increasing in scale and complexity. For example, it is difficult to perform a test because it is not possible to simply grasp the influence range when the configuration information is updated due to cloudization, virtualization, platformization, or the like. If the test is omitted, there is a large risk in a large and complicated system.
  • the development operation support system such as the basic example of FIG. 1 has a problem that the test when the configuration information is updated cannot be easily performed.
  • FIG. 3 shows an overview of the development and operation support system according to the embodiment.
  • the development and operation support system 100 according to the embodiment is a system that supports the development work and operation work of the developer and the operator, and mainly includes the development management server 10 and the operation management server 20.
  • CMDB 30 and target system 40 are provided.
  • the development management server 10 includes an update unit 11 that updates the configuration information of the CMDB 30.
  • the operation management server 20 includes an association unit 21, a setting unit 22, and a test execution unit 23.
  • the associating unit 21 associates in advance the update contents of the configuration information of the CMDB 30 and the test scenario corresponding to the update contents.
  • the setting unit 22 sets the target system 40 according to the update contents of the configuration information in the CMDB 30.
  • the test execution unit 23 executes a system test on the set target system 40 based on the test scenario associated with the updated content of the CMDB 30.
  • FIG. 4 shows the configuration of the development and operation support system according to the present embodiment.
  • the development and operation support system 101 includes a development management server 10, an operation management server 20, a CMDB 30, a test DB 31, a target system 40, a development terminal 50, and an operation terminal 60.
  • the functions realized by each device may be realized by one or any number of devices.
  • the development management server 10 and the operation management server 20 may be a single server device.
  • the development terminal 50 and the operation terminal 60 may be one terminal device, and the CMDB 30 and the test DB 31 may be one database device.
  • the development terminal (design terminal) 50 is a terminal device on which a developer performs operations necessary for development work, and is, for example, a personal computer.
  • the development terminal 50 is communicably connected to the development management server 10 via a network or the like, and accesses the development management server 10 and inputs information according to the developer's operation.
  • the operation terminal 60 is a terminal device on which an operator performs operations necessary for operation work (including maintenance work), and is, for example, a personal computer.
  • the operation terminal 60 is communicably connected to the operation management server 20 via a network or the like, and accesses the operation management server 20 and inputs information according to the operation of the operator.
  • the target system 40 is a system that is a target of development and operation in the development and operation support system 101.
  • the target system 40 may include various IT systems, and includes, for example, a cloud (CLOUD) system, a network (NW) system, a storage (ST) system, and a server (SV) system.
  • CLOUD cloud
  • NW network
  • ST storage
  • SV server
  • the CMDB 30 is a database that stores configuration information (design information) set in the target system 40.
  • the configuration information of the CMDB includes various parameters to be set in the target system 40 and information related to software installed in the target system 40 (such as an interpreter source code).
  • the CMDB 30 includes a work pattern table and the like as will be described later.
  • a work management DB that stores a work pattern table may be provided.
  • the test DB 31 is a database that stores information necessary for automatically executing a test (system test) on the target system 40.
  • the test DB 31 includes a test scenario table, an association table, and the like as will be described later in addition to the test program and test parameters. It can be said that a storage unit (database) for storing a test scenario table, a pegging table, and the like is provided.
  • the development management server 10 is a management device that supports and manages a developer's development work, and is, for example, a server computer such as a workstation.
  • the development management server 10 can access (refer to) the CMDB 30 and the test DB 31 and is connected to the operation management server 20 so as to be communicable.
  • the development management server 10 includes an update unit 11 and a UI (User Interface) unit 12.
  • the UI unit 12 is a user interface for receiving an input from the development terminal 50 or the like, and displays a GUI (Graphical User Interface) such as a window or an icon on the display unit of the development terminal 50.
  • the updating unit 11 updates configuration information (setting information) stored in the CMDB 30 based on information input from the development terminal 50 via the UI unit 12.
  • the update unit 11 may notify the operation management server 20 that the configuration information of the CMDB 30 has been updated.
  • the operation management server 20 is a management device that supports and manages the operation work of the operator, and is, for example, a server computer such as a workstation.
  • the operation management server 20 can access (refer to) the CMDB 30 and the test DB 31, and is connected to the target system 40 so as to be communicable (can be set).
  • the operation management server 20 includes an association unit 21, a setting unit 22, a test execution unit 23, a workflow definition unit 24, and a UI unit 25.
  • the UI unit 25 is a user interface for accepting input from the operation terminal 60 and the like, like the UI unit 12 of the development management server 10. For example, the UI unit 25 displays a GUI on the display unit of the operation terminal 60.
  • the workflow definition unit 24 generates or stores a workflow definition that describes the flow of operation work in advance.
  • the workflow definition describes the order of setting work on the target system 40 and the order of test work. For example, it is described that configuration information is set or tested in the first cloud system, second network system, third storage system, and fourth server system.
  • the associating unit 21 associates (links) a work pattern for the configuration information of the CMDB 30 and a test scenario corresponding to the work pattern. As will be described later, the associating unit 21 associates the work pattern and the test pattern with the association table of the test DB 31. For example, the associating unit 21 associates the operator (or developer) by setting in advance. However, the associating unit 21 may automatically associate from the test history and the execution result.
  • the setting unit 22 sets (applies) the configuration information (setting information) stored in the CMDB 30 to the target system 40 based on an instruction input from the operation terminal 60 via the UI unit 25.
  • the setting unit 22 sets each system of the target system 40 in accordance with the workflow definition of the workflow definition unit 24.
  • the setting unit 22 performs setting using various tools (configuration management tool, virtualization tool, etc.) according to the system to be provided.
  • the setting unit 22 can automatically set the target system 40 when the configuration information stored in the CMDB 30 is updated (when the update unit 11 updates the configuration information).
  • the test execution unit 23 automatically executes a test of the target system 40 when configuration information is set (applied) to the target system 40.
  • the test execution unit 23 refers to the test DB 31 and executes a test based on a test scenario corresponding to the work pattern of the configuration information.
  • the test execution unit 23 executes a test of the target system 40 according to the workflow definition of the workflow definition unit 24.
  • the test execution unit 23 can also execute a test of the target system 40 based on an instruction input from the operation terminal 60 via the UI unit 25.
  • the test execution unit 23 outputs the test execution result to the operation terminal 60 and the development management server 10.
  • FIG. 5 shows an operation example of the development and operation support system according to the present embodiment
  • FIGS. 6 and 7 show data examples of the test DB 31 and the CMDB 30 according to the present embodiment.
  • the operation management server 20 associates a work pattern with a test scenario in advance (S201).
  • the association unit 21 of the operation management server 20 associates (links) a work pattern for the configuration information of the CMDB 30 and a test scenario corresponding to the work pattern, for example, according to an instruction from the operator.
  • the CMDB 30 stores a work pattern table PT
  • the test DB 31 stores a test scenario table TT and a linkage table RT.
  • the work pattern table PT (update content table) stores a list of work patterns (update content) for the configuration information of the CMDB 30.
  • work patterns and work pattern numbers (identification numbers) are stored in association with each other.
  • An example of a work pattern is adding or deleting a server to a specific load balancer.
  • the test scenario table TT stores a list of test scenarios to be performed on the target system 40.
  • a test scenario and a test scenario number are stored in association with each other. Examples of test scenarios include accessing a specific site and uploading a specific file.
  • the association table RT associates (associates) the work pattern (update contents) of the work pattern table PT with the test scenario of the test scenario table TT.
  • the association table RT the work pattern No. of the work pattern table PT and the test scenario No. of the test scenario table TT are stored in association with each other.
  • the associating unit 21 associates the work pattern (update contents) with the test scenario and stores them in the associating table RT according to the input instruction. Thereafter, the test execution unit 23 determines a test scenario of the test scenario table TT corresponding to the work pattern (update contents) of the work pattern table PT based on the association table RT.
  • the development management server 10 updates the CMDB 30 (S202).
  • the developer designs the target system 40 according to the requirement definition, and inputs the designed information to the development management server 10 via the development terminal 50.
  • the update unit 11 of the development management server 10 updates the configuration information of the CMDB 30 based on the input information.
  • the timing for updating the CMDB 30 may be a development period or an operation (maintenance) period.
  • the CMDB 30 includes a master table MT.
  • the master table MT stores the latest updated configuration information, and stores the record number, work pattern, and setting parameters (host, p1, etc.) in association with each other.
  • Record No. indicates identification information for identifying configuration information
  • a work pattern indicates information corresponding to the work pattern table TP of the test DB
  • a setting parameter indicates configuration information to be updated.
  • a plurality of master tables MT are provided in accordance with the target system 40 to be set. For example, a master table MT1 for server system OS settings, a master table MT2 for network system security settings, a master table MT3 for server system application settings, and the like are stored.
  • the operation management server 20 sets the target system 40 (S203).
  • the operator instructs the operation management server 20 to set the configuration information via the operation terminal 60.
  • the setting unit 22 of the operation management server 20 sets the configuration information stored in the CMDB 30 to the target system 40 in accordance with the input instruction (or automatically at the time of update or application). For example, only the updated information of the configuration information of the CMDB 30 is set.
  • the operation management server 20 determines a test scenario (S204).
  • the test execution unit 23 of the operation management server 20 refers to the association table RT of the test DB 31 and executes the CMDB 30 ( The test scenario of the test scenario table TT associated with the work patterns of the master table MT) and the work pattern table PT is extracted.
  • the operation management server 20 executes a test (S205).
  • the test execution unit 23 of the operation management server 20 executes the test of the target system 40 based on the determined test scenario. That is, the test scenario of the test scenario table TT selected by the test scenario No. of the association table RT is executed by the test program.
  • the test execution unit 23 outputs the test execution result to the operation terminal 60 and the development management server 10.
  • the operation terminal 60 and the development management server 10 development terminal 50
  • the execution result is abnormal, the setting is redone, the CMDB is corrected, and the like.
  • FIG. 8 shows an image of a system to which this embodiment is applied.
  • the work pattern (change work) of the configuration information is associated with the test scenario (confirmation scenario) to be performed, and the setting is performed in the target system according to the work pattern. Thereafter, a test corresponding to the work pattern is automatically executed (for example, via the Internet).
  • work patterns and confirmation scenarios can be linked in a many-to-many manner, and CMDB information that is centrally managed from both work and confirmation is used to create a series of work patterns and test scenarios. Register for workflow and automate.
  • Each configuration in the above-described embodiment is configured by hardware and / or software, and may be configured by one piece of hardware or software, or may be configured by a plurality of pieces of hardware or software.
  • the function (processing) of each device may be realized by a computer having a CPU, a memory, and the like.
  • an operation management program for performing the operation management method according to the embodiment may be stored in the storage device, and each function may be realized by executing a program stored in the storage device by the CPU.
  • Non-transitory computer readable media include various types of tangible storage media (tangible storage medium). Examples of non-transitory computer-readable media include magnetic recording media (eg flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg magneto-optical discs), CD-ROMs (Read Only Memory), CD-Rs, CD-R / W, semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable ROM), flash ROM, RAM (random access memory)) are included.
  • the program may also be supplied to the computer by various types of temporary computer-readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves.
  • the temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
  • the present invention can be used for the development of IT systems.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

運用管理サーバ（２０）は、ＣＭＤＢ（３０）の構成情報の更新内容と更新内容に対応するテストシナリオとを関連付ける関連付け部（２１）と、ＣＭＤＢ（３０）の構成情報の更新内容に応じて対象システム（４０）を設定する設定部（２２）と、更新内容に関連付けられたテストシナリオに基づいて、設定された対象システム（４０）に対しシステムテストを実行するテスト実行部（２３）と、を備える。これにより、簡易にシステムテストを実行することが可能な運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを提供する。

Description

運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを格納した非一時的なコンピュータ可読媒体
　本発明は、運用管理サーバ、開発運用支援システム、それらの方法及びプログラムに関し、特に、構成管理データベースを用いる運用管理サーバ、開発運用支援システム、それらの方法及びプログラムに関する。
　ＩＴ（Information Technology）システムの構成情報を管理するためのデータベースとして、ＣＭＤＢ（Configuration Management Database）が知られている。ＣＭＤＢなどを用いてシステムの開発（設計）及び運用を行う手法の一つとして、開発と運用の連携を重視するＤｅｖＯｐｓ（Development & Operations）が注目されている。開発と運用が連携し協力し合うことで、ユーザの要求に合わせたシステムの構築やテスト等を効率よく行うことができる。なお、システム構築に必要となる様々な情報を作成する作業を、開発もしくは設計と称する。また、開発もしくは設計によって作成された情報を実システムに適用し、システムを稼働させる作業（その後の保守作業含む）を運用と称する。
　関連する技術として、例えば、特許文献１や２が知られている。特許文献１には、物品等の製品の製造履歴を記録する技術が記載され、特許文献２には、ＲＦＩＤタグを用いて工程管理を行う技術が記載されている。
特開２０１１－０９０６４９号公報 特開２０１０－１４６０９０号公報
　近年、開発及び運用の対象となるシステムの大規模化や複雑化が進んでいることから、構成情報の更新によるシステムの影響範囲を把握することが難しい。このため、ＤｅｖＯｐｓのような手法を採用したとしても、システムテストを簡易に行うことが困難であるという問題がある。なお、構成情報を適用（設定）したシステムを対象としたテストをシステムテスト（もしくは単にテスト）と言う。
　本発明は、このような課題に鑑み、簡易にシステムテストを実行することが可能な運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを提供することを目的とする。
　本発明に係る運用管理サーバは、構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを関連付ける関連付け部と、前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定する設定部と、前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行するテスト実行部と、を備えるものである。
　本発明に係る開発運用支援システムは、開発管理サーバと運用管理サーバと構成管理データベースとを備えた開発運用支援システムであって、前記開発管理サーバは、前記構成管理データベースの構成情報を更新する更新部を備え、前記運用管理サーバは、前記構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを予め関連付ける関連付け部と、前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定する設定部と、前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行するテスト実行部と、を備えるものである。
　本発明に係る運用管理方法は、構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを関連付け、前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行するものである。
　本発明に係る開発運用支援方法は、構成管理データベースを備えた開発運用支援システムにおける開発運用支援方法であって、前記構成管理データベースの構成情報を更新し、前記構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを予め関連付け、前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行するものである。
　本発明に係る運用管理プログラムは、構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを関連付け、前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行する、処理をコンピュータに実行させるものである。
　本発明に係る開発運用支援プログラムは、構成管理データベースの構成情報を更新し、前記構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを予め関連付け、前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行する、処理をコンピュータに実行させるものである。
　本発明によれば、簡易にシステムテストを実行することが可能な運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを提供することができる。
基本例の開発運用支援システムの構成を示す構成図である。 一般的なシステム開発フローを示すフローチャートである。 実施の形態に係る開発運用支援システムの概念を示す構成図である。 実施の形態１に係る開発運用支援システムの構成例を示す構成図である。 実施の形態１に係る開発運用支援システムの動作例を示すフローチャートである。 実施の形態１に係るデータベースに蓄積されるデータの例を示す図である。 実施の形態１に係るデータベースに蓄積されるデータの例を示す図である。 実施の形態１に係る開発運用支援システムの概念を説明するための説明図である。
（基本例）
　実施の形態の説明の前に、実施の形態の基本となる基本例について説明する。図１は、基本例の開発運用支援システムの構成を示している。図１に示すように、基本例の開発運用支援システム２００は、開発管理サーバ１、運用管理サーバ２、ＣＭＤＢ３、対象システム４を備えている。
　ＣＭＤＢ３は、対象システム４の構成情報を記憶するデータベースである。開発管理サーバ１は、開発者から入力される情報等にしたがってＣＭＤＢ３の構成情報を更新する。運用管理サーバ２は、運用者から入力される指示等にしたがって、ＣＭＤＢ３の構成情報を対象システム４へ適用する。
　図２は、一般的なシステム開発フローを示している。図２に示すように、一般的にエンドユーザへＩＴシステムを提供する場合、企画プロセス（Ｓ１０１）、開発プロセス（Ｓ１０２）、運用プロセス（Ｓ１０３）、保守プロセス（Ｓ１０４）の順に作業が進められる。
　企画プロセス（Ｓ１０１）では、ＳＥ（System Engineer）などの開発者（設計者）が、エンドユーザの要望にしたがって要件定義を行い、対象システム４の仕様を決定する。例えば、企画プロセス（Ｓ１０１）の後、基本例の開発運用支援システム２００を用いて作業が進められる。
　開発プロセス（Ｓ１０２）では、開発者が、要件定義の仕様にしたがって対象システム４の構成情報を作成（コーディング）する。開発者は、開発端末等を用いて開発管理サーバ１へアクセスし、ＣＭＤＢ３へ対象システム４の構成情報を登録（更新）する。
　運用プロセス（Ｓ１０３）では、運用者が、運用端末等を用いて運用管理サーバ２へアクセスし、ＣＭＤＢ３の構成情報を対象システム４へ適用する。さらに、保守プロセス（Ｓ１０４）では、運用者が、運用管理サーバ２へアクセスし、対象システム４の状態監視や問題への対処を行う。運用者は、システムの構築や拡張、修正を行う場合、更新されたＣＭＤＢ３の構成情報を対象システム４へ適用し、必要なテスト作業を実施する。
　このように、運用者は、ＣＭＤＢの構成情報が更新されると、対象システムのテストを実施する必要がある。しかしながら、構成情報及びテストの対象となるシステムの大規模化及び複雑化が進んでいる。例えば、クラウド化や仮想化、プラットフォーム化等により、構成情報を更新した場合の影響範囲を単純に把握することができないため、テストを実施することが困難となっている。仮にテストを省略した場合には、大規模化及び複雑化したシステムにおけるリスクが大きい。
　このため、図１の基本例のような開発運用支援システムでは、構成情報を更新した場合のテストを簡易に行うことができないという問題がある。
（実施の形態の概要）
　図３は、実施の形態に係る開発運用支援システムの概要を示している。図３に示すように、実施の形態に係る開発運用支援システム１００は、開発者及び運用者の開発作業及び運用作業を支援するシステムであって、主に、開発管理サーバ１０、運用管理サーバ２０、ＣＭＤＢ３０、対象システム４０を備えている。開発管理サーバ１０は、ＣＭＤＢ３０の構成情報を更新する更新部１１を備えている。
　運用管理サーバ２０は、関連付け部２１、設定部２２、テスト実行部２３を備えている。関連付け部２１は、ＣＭＤＢ３０の構成情報の更新内容とその更新内容に対応するテストシナリオとを予め関連付けている。設定部２２は、ＣＭＤＢ３０の構成情報の更新内容に応じて対象システム４０を設定する。テスト実行部２３は、ＣＭＤＢ３０の更新内容に関連付けられたテストシナリオに基づいて、設定された対象システム４０に対しシステムテストを実行する。
　このように、構成情報の更新内容と対応するテストシナリオを関連付けておき、この関連付けに基づいてテストを実行することで、簡易にテストを行うことができる。
（実施の形態１）
　以下、図面を参照して実施の形態１について説明する。図４は、本実施の形態に係る開発運用支援システムの構成を示している。
　図４に示すように、本実施の形態に係る開発運用支援システム１０１は、開発管理サーバ１０、運用管理サーバ２０、ＣＭＤＢ３０、テストＤＢ３１、対象システム４０、開発端末５０、運用端末６０を備えている。なお、各装置で実現する機能を、１つまたは任意の数の装置で実現してもよい。例えば、開発管理サーバ１０と運用管理サーバ２０を１つのサーバ装置としてもよい。開発端末５０と運用端末６０を１つの端末装置としてもよいし、ＣＭＤＢ３０とテストＤＢ３１を１つのデータベース装置としてもよい。
　開発端末（設計端末）５０は、開発者が開発作業に必要となる操作を行う端末装置であり、例えば、パーソナルコンピュータ等である。開発端末５０は、ネットワーク等を介して開発管理サーバ１０と通信可能に接続されており、開発者の操作に応じて開発管理サーバ１０へアクセスし情報の入力等を行う。
　運用端末６０は、運用者が運用作業（保守作業含む）に必要となる操作を行う端末装置であり、例えば、パーソナルコンピュータ等である。運用端末６０は、ネットワーク等を介して運用管理サーバ２０と通信可能に接続されており、運用者の操作に応じて運用管理サーバ２０へアクセスし情報の入力等を行う。
　対象システム４０は、開発運用支援システム１０１における開発及び運用の対象となるシステムである。対象システム４０は、様々なＩＴシステムを含んでもよく、例えば、クラウド（ＣＬＯＵＤ）システム、ネットワーク（ＮＷ）システム、ストレージ（ＳＴ）システム、サーバ（ＳＶ）システムを含んでいる。
　ＣＭＤＢ３０は、対象システム４０に設定する構成情報（設計情報）を記憶するデータベースである。ＣＭＤＢの構成情報は、対象システム４０に設定するための各種パラメータや、対象システム４０に実装するソフトウェアに関する情報（インタプリタ用のソースコード等）を含む。ＣＭＤＢ３０は、構成情報の他、後述のように作業パターンテーブル等を含んでいる。なお、ＣＭＤＢ３０とは別に、作業パターンテーブルを格納する作業管理ＤＢを備えていてもよい。
　テストＤＢ３１は、対象システム４０に対しテスト（システムテスト）を自動的に実施するために必要な情報を記憶するデータベースである。テストＤＢ３１は、テストプログラムやテストパラメータの他、後述のようにテストシナリオテーブル、紐付テーブル等を含んでいる。なお、テストシナリオテーブル、紐付テーブル等を格納する記憶部（データベース）を備えているとも言える。
　開発管理サーバ１０は、開発者の開発作業を支援及び管理する管理装置であり、例えば、ワークステーション等のサーバコンピュータである。開発管理サーバ１０は、ＣＭＤＢ３０及びテストＤＢ３１にアクセス可能（参照可能）であり、運用管理サーバ２０とも通信可能に接続されている。
　開発管理サーバ１０は、更新部１１、ＵＩ（User Interface）部１２を備えている。ＵＩ部１２は、開発端末５０などからの入力を受け付けるためのユーザインタフェースであり、例えばウィンドウやアイコンなどのＧＵＩ（Graphical User Interface）を開発端末５０の表示部に表示する。更新部１１は、ＵＩ部１２を介して開発端末５０から入力される情報に基づき、ＣＭＤＢ３０に格納された構成情報（設定情報）を更新する。更新部１１は、ＣＭＤＢ３０の構成情報を更新したことを運用管理サーバ２０へ通知してもよい。
　運用管理サーバ２０は、運用者の運用作業を支援及び管理する管理装置であり、例えば、ワークステーション等のサーバコンピュータである。運用管理サーバ２０は、ＣＭＤＢ３０及びテストＤＢ３１にアクセス可能（参照可能）であり、対象システム４０とネットワーク等を介して通信可能（設定可能）に接続されている。
　運用管理サーバ２０は、関連付け部２１、設定部２２、テスト実行部２３、ワークフロー定義部２４、ＵＩ部２５を備えている。ＵＩ部２５は、開発管理サーバ１０のＵＩ部１２と同様、運用端末６０などからの入力を受け付けるためのユーザインタフェースであり、例えばＧＵＩを運用端末６０の表示部に表示する。
　ワークフロー定義部２４は、予め運用作業の流れを記述したワークフロー定義を生成もしくは記憶する。ワークフロー定義には、対象システム４０への設定作業の順序やテスト作業の順序が記述されている。例えば、１番目にクラウドシステム、２番目にネットワークシステム、３番目にストレージシステム、４番目にサーバシステムへ構成情報を設定もしくはテストを実施することが記述されている。
　関連付け部２１は、ＣＭＤＢ３０の構成情報に対する作業パターンと、その作業パターンに対応するテストシナリオとを関連付ける（紐付ける）。関連付け部２１は、後述のように、テストＤＢ３１の紐付テーブルによって作業パターンとテストパターンを関連付ける。例えば、関連付け部２１は、運用者（もしくは開発者）が予め設定することで関連付けを行うが、テストの履歴や実行結果から自動的に関連付けてもよい。
　設定部２２は、ＵＩ部２５を介して運用端末６０から入力される指示に基づき、ＣＭＤＢ３０に格納された構成情報（設定情報）を対象システム４０に設定（適用）する。設定部２２は、ワークフロー定義部２４のワークフロー定義にしたがって、対象システム４０の各システムを設定する。設定部２２は、提供するシステムに応じた各種ツール（構成管理ツールや仮想化ツール等）を用いて設定を行う。設定部２２は、ＣＭＤＢ３０に格納された構成情報が更新されたとき（更新部１１が構成情報を更新した場合に）、自動的に対象システム４０を設定することもできる。
　テスト実行部２３は、対象システム４０に構成情報が設定（適用）された場合に、自動的に対象システム４０のテストを実行する。テスト実行部２３は、テストＤＢ３１を参照し、構成情報の作業パターンに対応したテストシナリオに基づいてテストを実行する。また、テスト実行部２３は、ワークフロー定義部２４のワークフロー定義にしたがって、対象システム４０のテストを実行する。テスト実行部２３は、ＵＩ部２５を介して運用端末６０から入力される指示に基づき、対象システム４０のテストを実行することもできる。テスト実行部２３は、テストの実行結果を、運用端末６０や開発管理サーバ１０へ出力する。
　次に、図５～図７を用いて、本実施の形態に係る開発運用支援システムの動作について説明する。図５は、本実施の形態に係る開発運用支援システムの動作例、図６及び図７は、本実施の形態に係るテストＤＢ３１及びＣＭＤＢ３０のデータ例を示している。
　図５に示すように、運用管理サーバ２０は、予め、作業パターンとテストシナリオを関連付ける（Ｓ２０１）。運用管理サーバ２０の関連付け部２１は、例えば運用者の指示にしたがって、ＣＭＤＢ３０の構成情報に対する作業パターンと、その作業パターンに対応するテストシナリオとを関連付ける（紐付ける）。例えば、図６に示すように、ＣＭＤＢ３０は、作業パターンテーブルＰＴを格納し、テストＤＢ３１は、テストシナリオテーブルＴＴ、紐付テーブルＲＴを格納する。
　作業パターンテーブルＰＴ（更新内容テーブル）は、ＣＭＤＢ３０の構成情報に対する作業パターン（更新内容）のリストを記憶する。作業パターンテーブルＰＴでは、作業パターンと作業パターンＮｏ（識別番号）が関連付けて記憶されている。作業パターンの一例には、特定のロードバランサへのサーバ追加や削除等がある。
　テストシナリオテーブルＴＴは、対象システム４０へ行うテストシナリオのリストを記憶する。テストシナリオテーブルＴＴでは、テストシナリオとテストシナリオＮｏ（識別番号）が関連付けて記憶されている。テストシナリオの一例には、特定サイトへのアクセスや、特定ファイルのアップロード等がある。
　紐付テーブルＲＴ（関連付けテーブル）は、作業パターンテーブルＰＴの作業パターン（更新内容）とテストシナリオテーブルＴＴのテストシナリオとを紐付ける（関連付ける）。紐付テーブルＲＴでは、作業パターンテーブルＰＴの作業パターンＮｏとテストシナリオテーブルＴＴのテストシナリオＮｏとが関連付けて記憶されている。関連付け部２１は、入力される指示に応じて、作業パターン（更新内容）とテストシナリオとを紐付けて紐付テーブルＲＴに記憶する。その後、テスト実行部２３は、紐付テーブルＲＴに基づいて、作業パターンテーブルＰＴの作業パターン（更新内容）に対応するテストシナリオテーブルＴＴのテストシナリオを決定する。紐付テーブルＲＴでは、作業パターンとテストシナリオは、１対１に限らず多対多の関係で紐付けが可能である。図の例では、作業パターンＮｏ＝１は、テストシナリオＮｏ＝１及び３に紐付けられている。
　その後、開発管理サーバ１０は、ＣＭＤＢ３０を更新する（Ｓ２０２）。開発者は、要件定義にしたがって対象システム４０を設計し、設計した情報を、開発端末５０を介して開発管理サーバ１０へ入力する。開発管理サーバ１０の更新部１１は、入力された情報をもとに、ＣＭＤＢ３０の構成情報を更新する。ＣＭＤＢ３０を更新するタイミングは、開発期間でもよいし、運用（保守）期間でもよい。
　例えば、図７に示すように、ＣＭＤＢ３０は、マスタテーブルＭＴを含んでいる。マスタテーブルＭＴは、更新された最新の構成情報を記憶し、レコードＮｏ、作業パターン、設定パラメータ（host,p1等）を関連付けて記憶する。レコードＮｏは構成情報を識別する識別情報、作業パターンはテストＤＢの作業パターンテーブルＴＰと対応する情報、設定パラメータは更新される構成情報を示している。マスタテーブルＭＴは、設定する対象システム４０に合わせて複数設けられる。例えば、サーバシステムのＯＳ設定用のマスタテーブルＭＴ１、ネットワークシステムのセキュリティ設定用のマスタテーブルＭＴ２、サーバシステムのアプリケーション設定用のマスタテーブルＭＴ３等を記憶する。
　続いて、運用管理サーバ２０は、対象システム４０を設定する（Ｓ２０３）。運用者は、ＣＭＤＢ３０が更新されると（もしくは構成情報の適用時期になると）、運用端末６０を介して運用管理サーバ２０へ構成情報の設定を指示する。運用管理サーバ２０の設定部２２は、入力された指示にしたがい（もしくは更新時や適用時期に自動的に）、ＣＭＤＢ３０に格納されている構成情報を対象システム４０へ設定する。例えば、ＣＭＤＢ３０の構成情報のうち更新された情報のみ設定を行う。
　続いて、運用管理サーバ２０は、テストシナリオを決定する（Ｓ２０４）。運用管理サーバ２０のテスト実行部２３は、Ｓ２０３で対象システム４０が設定されると、設定した構成情報の作業パターンに対応したテストを実行するため、テストＤＢ３１の紐付テーブルＲＴを参照し、ＣＭＤＢ３０（マスタテーブルＭＴ）及び作業パターンテーブルＰＴの作業パターンに関連付けられた、テストシナリオテーブルＴＴのテストシナリオを抽出する。図６の例では、ＣＭＤＢ３０の作業パターンが作業パターンＮｏ＝３である場合、テストシナリオＮｏ＝１～３のテストパターンが抽出される。
　続いて、運用管理サーバ２０は、テストを実行する（Ｓ２０５）。運用管理サーバ２０のテスト実行部２３は、Ｓ２０４で作業パターンに対応したテストシナリオが決定すると、決定したテストシナリオに基づき対象システム４０のテストを実行する。すなわち、紐付テーブルＲＴのテストシナリオＮｏで選択されたテストシナリオテーブルＴＴのテストシナリオを、テストプログラムによって実行する。テスト実行部２３は、テストの実行結果を、運用端末６０や開発管理サーバ１０へ出力する。運用端末６０や開発管理サーバ１０（開発端末５０）では、実行結果が異常である場合、設定のやり直しや、ＣＭＤＢの修正等を行う。
　図８は、本実施の形態を適用したシステムのイメージを示している。図８に示すように、本実施の形態では、構成情報の作業パターン（変更作業）と実施すべきテストシナリオ（確認シナリオ）を紐付けておき、作業パターンにしたがって対象システムに設定が行われた後、作業パターンに対応したテストを自動的に実行する（例えばインターネットを介して）。特に、本実施の形態では、作業パターンと確認シナリオを多対多で紐付けが可能であり、作業及び確認の両方から一元管理されたＣＭＤＢの情報を利用し、作業パターンとテストシナリオを一連のワークフローに登録して自動化する。
　これにより、大規模化及び複雑化したシステムであっても、自動的にテストが実行されるため、簡易にテストを行うことができる。また、多対多で紐付け管理することで、作業後の確認漏れ（デグレード含む）を防止し品質の向上を図ることができる。さらに、一元化されたＣＭＤＢの情報を共有することで、作業対象と確認対象のズレを防止し品質の向上が可能である。
　なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。
　上述の実施形態における各構成は、ハードウェア又はソフトウェア、もしくはその両方によって構成され、１つのハードウェア又はソフトウェアから構成してもよいし、複数のハードウェア又はソフトウェアから構成してもよい。各装置の機能（処理）を、ＣＰＵやメモリ等を有するコンピュータにより実現してもよい。例えば、記憶装置に実施形態における運用管理方法を行うための運用管理プログラムを格納し、各機能を、記憶装置に格納されたプログラムをＣＰＵで実行することにより実現してもよい。
　これらのプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（random access memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
　この出願は、２０１７年３月２３日に出願された日本出願特願２０１７－０５８０５１を基礎とする優先権を主張し、その開示の全てをここに取り込む。
　本発明は、ＩＴシステムの開発に利用することができる。
１、１０　開発管理サーバ
３、３０　ＣＭＤＢ
２、２０　運用管理サーバ
４、４０　対象システム
１１　　　更新部
１２　　　ＵＩ部
２１　　　関連付け部
２２　　　設定部
２３　　　テスト実行部
２４　　　ワークフロー定義部
２５　　　ＵＩ部
３１　　　テストＤＢ
５０　　　開発端末
６０　　　運用端末
１００、１０１、２００　開発運用支援システム
ＭＴ、ＭＴ１～ＭＴ３　マスタテーブル
ＰＴ　　　作業パターンテーブル
ＲＴ　　　紐付テーブル
ＴＴ　　　テストシナリオテーブル

Claims (12)

  1. 　構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを関連付ける関連付け手段と、
    　前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定する設定手段と、
    　前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行するテスト実行手段と、
    　を備える、運用管理サーバ。
  2. 　前記更新内容のリストを含む更新内容テーブルを記憶する前記構成管理データベースを参照し、
    　前記テストシナリオのリストを含むテストシナリオテーブルと、前記更新内容テーブル内の更新内容と前記テストシナリオテーブル内のテストシナリオとを関連付ける関連付けテーブルと、を記憶するテストデータベースを参照する、
    　請求項１に記載の運用管理サーバ。
  3. 　前記関連付けテーブルでは、複数の前記更新内容と複数の前記テストシナリオとが関連付けられている、
    　請求項２に記載の運用管理サーバ。
  4. 　前記関連付け手段は、入力される指示に応じて、前記更新内容と前記テストシナリオとを関連付けて前記関連付けテーブルに記憶する、
    　請求項２または３に記載の運用管理サーバ。
  5. 　前記テスト実行手段は、前記関連付けテーブルに基づいて、前記更新内容テーブルの更新内容に対応する前記テストシナリオテーブルのテストシナリオを決定する、
    　請求項２乃至４のいずれか一項に記載の運用管理サーバ。
  6. 　前記設定手段は、前記対象システム内の複数の運用システムへの設定手順を含むワークフロー情報に基づいて前記対象システムを設定する、
    　請求項１乃至５のいずれか一項に記載の運用管理サーバ。
  7. 　前記テスト実行手段は、前記対象システム内の複数の運用システムへのテスト手順を含むワークフロー情報に基づいて前記対象システムをテストする、
    　請求項１乃至６のいずれか一項に記載の運用管理サーバ。
  8. 　開発管理サーバと運用管理サーバと構成管理データベースとを備え、
    　前記開発管理サーバは、
    　　前記構成管理データベースの構成情報を更新する更新手段を備え、
    　前記運用管理サーバは、
    　　前記構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを予め関連付ける関連付け手段と、
    　　前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定する設定手段と、
    　　前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行するテスト実行手段と、
    　を備える、開発運用支援システム。
  9. 　構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを関連付け、
    　前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、
    　前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行する、
    　運用管理方法。
  10. 　構成管理データベースを備えた開発運用支援システムにおける開発運用支援方法であって、
    　前記構成管理データベースの構成情報を更新し、
    　前記構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを予め関連付け、
    　前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、
    　前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行する、
    　開発運用支援方法。
  11. 　構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを関連付け、
    　前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、
    　前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行する、
    　処理をコンピュータに実行させる運用管理プログラムを格納した非一時的なコンピュータ可読媒体。
  12. 　構成管理データベースの構成情報を更新し、
    　前記構成管理データベースの構成情報の更新内容と前記更新内容に対応するテストシナリオとを予め関連付け、
    　前記構成管理データベースの構成情報の更新内容に応じて対象システムを設定し、
    　前記更新内容に関連付けられたテストシナリオに基づいて、前記設定された対象システムに対しシステムテストを実行する、
    　処理をコンピュータに実行させる開発運用支援プログラムを格納した非一時的なコンピュータ可読媒体。
PCT/JP2018/011590 2017-03-23 2018-03-23 運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを格納した非一時的なコンピュータ可読媒体 WO2018174223A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
US16/494,636 US11500760B2 (en) 2017-03-23 2018-03-23 Operation management server, development operation support system, method thereof, and non-transitory computer readable medium storing program thereof
CN201880019688.4A CN110447018B (zh) 2017-03-23 2018-03-23 操作管理服务器、开发操作支持系统及其方法以及存储其程序的非暂时性计算机可读介质
JP2019507007A JP6835207B2 (ja) 2017-03-23 2018-03-23 運用管理サーバ、開発運用支援システム、それらの方法及びプログラム
EP18770987.8A EP3605339A4 (en) 2017-03-23 2018-03-23 OPERATION MANAGEMENT SERVER, DEVELOPMENT OPERATION SUPPORT SYSTEM, RELATED METHOD, AND NON-TRANSIENT COMPUTER READABLE SUPPORT STORING AN ASSOCIATED PROGRAM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017058051 2017-03-23
JP2017-058051 2017-03-23

Publications (1)

Publication Number Publication Date
WO2018174223A1 true WO2018174223A1 (ja) 2018-09-27

Family

ID=63585549

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/011590 WO2018174223A1 (ja) 2017-03-23 2018-03-23 運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを格納した非一時的なコンピュータ可読媒体

Country Status (5)

Country Link
US (1) US11500760B2 (ja)
EP (1) EP3605339A4 (ja)
JP (1) JP6835207B2 (ja)
CN (1) CN110447018B (ja)
WO (1) WO2018174223A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021043582A (ja) * 2019-09-09 2021-03-18 富士通株式会社 生成プログラム、生成方法、および情報処理装置
KR20230050602A (ko) * 2021-10-08 2023-04-17 주식회사 세미파이브 시스템 온 칩 설계 검증을 위한 테스트 자동화 시스템 및 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05274281A (ja) * 1992-03-27 1993-10-22 Mitsubishi Electric Corp デュプレクス形オンライン計算機システムの増設，試験方法
JP2003233506A (ja) * 2002-02-12 2003-08-22 Nec Access Technica Ltd コンピュータシステム、及び、コンピュータシステム試験・診断方法
JP2010146090A (ja) 2008-12-16 2010-07-01 Hitachi Ltd 工程管理方法、工程管理システム、管理サーバ、端末、およびｒｆｉｄタグ
JP2011090649A (ja) 2009-10-26 2011-05-06 Toshiba Corp 製造履歴記録システムおよび製造履歴記録方法
WO2015045031A1 (ja) * 2013-09-25 2015-04-02 株式会社日立製作所 仮想マシンテストシステム、仮想マシンテスト方法
JP2017058051A (ja) 2015-09-15 2017-03-23 株式会社デンソー 受液器およびそれを備えた凝縮器

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7103874B2 (en) * 2003-10-23 2006-09-05 Microsoft Corporation Model-based management of computer systems and distributed applications
JP4939813B2 (ja) * 2006-02-07 2012-05-30 株式会社東芝 医用診断装置、及び医用診断装置の動作確認プログラム
JP5243804B2 (ja) 2008-01-21 2013-07-24 インターナショナル・ビジネス・マシーンズ・コーポレーション 構成要素を管理するためのコンピュータ・システム、並びにその方法及びコンピュータ・プログラム
JP5397328B2 (ja) * 2010-06-28 2014-01-22 株式会社リコー 画像形成装置
CN103220163B (zh) * 2012-01-19 2017-03-01 阿里巴巴集团控股有限公司 配置信息的更新方法和系统
CN102857371B (zh) * 2012-08-21 2016-04-20 曙光信息产业(北京)有限公司 一种面向集群系统的动态配置管理方法
JP5968451B2 (ja) * 2012-09-28 2016-08-10 株式会社日立製作所 計算機システム、及びプログラム
US9436725B1 (en) * 2013-02-28 2016-09-06 Amazon Technologies, Inc. Live data center test framework
JP2015011413A (ja) * 2013-06-27 2015-01-19 株式会社日立製作所 検証自動化方式
JP6256115B2 (ja) * 2014-03-10 2018-01-10 富士通株式会社 操作探索プログラム、操作探索方法、および操作探索装置
US9417911B2 (en) * 2014-03-12 2016-08-16 Live Planet Llc Systems and methods for scalable asynchronous computing framework
WO2015186219A1 (ja) * 2014-06-05 2015-12-10 株式会社日立製作所 分散処理システム及びその運用方法
US9021458B1 (en) * 2014-06-25 2015-04-28 Chef Software, Inc. Vertically integrated continuous delivery of an application
US9703692B2 (en) * 2014-07-30 2017-07-11 Hitachi, Ltd. Development supporting system
US9727365B2 (en) * 2015-04-12 2017-08-08 At&T Intellectual Property I, L.P. End-to-end validation of virtual machines
JP2017016392A (ja) * 2015-07-01 2017-01-19 株式会社日立製作所 計算機システム、制御サーバ、及び、検証方法
CN106155876B (zh) * 2016-07-26 2018-07-06 北京蓝海讯通科技股份有限公司 一种金丝雀分析方法、应用和计算设备
US10353807B2 (en) * 2016-08-26 2019-07-16 Accenture Global Solutions Limited Application development management
EP3301580B1 (en) * 2016-09-30 2021-06-09 Wipro Limited System for automatically generating test data for testing applications

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05274281A (ja) * 1992-03-27 1993-10-22 Mitsubishi Electric Corp デュプレクス形オンライン計算機システムの増設，試験方法
JP2003233506A (ja) * 2002-02-12 2003-08-22 Nec Access Technica Ltd コンピュータシステム、及び、コンピュータシステム試験・診断方法
JP2010146090A (ja) 2008-12-16 2010-07-01 Hitachi Ltd 工程管理方法、工程管理システム、管理サーバ、端末、およびｒｆｉｄタグ
JP2011090649A (ja) 2009-10-26 2011-05-06 Toshiba Corp 製造履歴記録システムおよび製造履歴記録方法
WO2015045031A1 (ja) * 2013-09-25 2015-04-02 株式会社日立製作所 仮想マシンテストシステム、仮想マシンテスト方法
JP2017058051A (ja) 2015-09-15 2017-03-23 株式会社デンソー 受液器およびそれを備えた凝縮器

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3605339A4

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021043582A (ja) * 2019-09-09 2021-03-18 富士通株式会社 生成プログラム、生成方法、および情報処理装置
JP7367410B2 (ja) 2019-09-09 2023-10-24 富士通株式会社 生成プログラム、生成方法、および情報処理装置
KR20230050602A (ko) * 2021-10-08 2023-04-17 주식회사 세미파이브 시스템 온 칩 설계 검증을 위한 테스트 자동화 시스템 및 방법
KR102602534B1 (ko) * 2021-10-08 2023-11-15 주식회사 세미파이브 시스템 온 칩 설계 검증을 위한 테스트 자동화 시스템 및 방법

Also Published As

Publication number Publication date
CN110447018B (zh) 2023-02-10
JPWO2018174223A1 (ja) 2020-01-23
EP3605339A1 (en) 2020-02-05
CN110447018A (zh) 2019-11-12
JP6835207B2 (ja) 2021-02-24
US11500760B2 (en) 2022-11-15
US20200394123A1 (en) 2020-12-17
EP3605339A4 (en) 2020-05-06

Similar Documents

Publication Publication Date Title
US11748064B2 (en) Architecture for analysis of value stream for software products
US10713040B2 (en) Hybrid development systems and methods
EP3399476B1 (en) Flow engine for building automated flows within a cloud based developmental platform
US11586426B2 (en) Service release tool
US20190361801A1 (en) Method and system for cloud-based automated software testing
US20160004566A1 (en) Execution time estimation device and execution time estimation method
WO2018174223A1 (ja) 運用管理サーバ、開発運用支援システム、それらの方法及びプログラムを格納した非一時的なコンピュータ可読媒体
JP6932575B2 (ja) 自動的な技術指示の生成
US20220308911A1 (en) System and method for a distributed workflow system
US11531528B2 (en) Systems and methods for non-disruptive continuous software delivery
US9612944B2 (en) Method and system for verifying scenario based test selection, execution and reporting
JP2019049798A (ja) 移送方法
JP6677345B2 (ja) 開発運用支援システム、開発管理サーバ、運用管理サーバ、それらの方法及びプログラム
US20230198991A1 (en) File-based configuration of access management
CN111435306A (zh) 一种代码的管理方法和装置
JP6287093B2 (ja) ソフトウェア開発支援装置、ソフトウェア開発支援方法及びプログラム
Sedeño et al. An Approach to Transform Public Administration into SOA-based Organizations.
JPWO2019187263A1 (ja) 情報処理装置、並びに、テスト管理方法及びプログラム
TWI773939B (zh) 版本管理系統、版本管理方法及非揮發性電腦可讀取記錄媒體
US20170060603A1 (en) Supporting operation of device
Guenther Automation products improve with customer feedback; improved product automation is a result of customer feedback. As customers give suppliers valuable product feedback, suppliers will consider many factors that may result in a new feature being added to an existing product or launch a new product to provide a solution
JP2019049956A (ja) 移送方法
McNutt et al. Release Engineering Best Practices at Google
JP2018160062A (ja) 利用内容管理装置、利用内容管理方法および利用内容管理プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18770987

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019507007

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018770987

Country of ref document: EP

Effective date: 20191023