JP2019095898A - インスタンス利用促進システム - Google Patents

インスタンス利用促進システム Download PDF

Info

Publication number
JP2019095898A
JP2019095898A JP2017222764A JP2017222764A JP2019095898A JP 2019095898 A JP2019095898 A JP 2019095898A JP 2017222764 A JP2017222764 A JP 2017222764A JP 2017222764 A JP2017222764 A JP 2017222764A JP 2019095898 A JP2019095898 A JP 2019095898A
Authority
JP
Japan
Prior art keywords
instance
unit
instances
inquiry
idle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017222764A
Other languages
English (en)
Other versions
JP6916096B2 (ja
Inventor
ナジム セビ
Sebih Nazim
ナジム セビ
順史 木下
Yorifumi Kinoshita
順史 木下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2017222764A priority Critical patent/JP6916096B2/ja
Priority to GB201818373A priority patent/GB2569872B/en
Priority to US16/192,835 priority patent/US10637741B2/en
Publication of JP2019095898A publication Critical patent/JP2019095898A/ja
Application granted granted Critical
Publication of JP6916096B2 publication Critical patent/JP6916096B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3055—Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061—Partitioning or combining of resources
    • G06F9/5072—Grid computing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/16—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks using machine learning or artificial intelligence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/02—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail using automatic reactions or user delegation, e.g. automatic replies or chatbot-generated messages
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00—Computing arrangements using knowledge-based models
    • G06N5/01—Dynamic search techniques; Heuristics; Dynamic trees; Branch-and-bound
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Environmental & Geological Engineering (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Debugging And Monitoring (AREA)

Abstract

【課題】アイドル状態のインスタンスを見つけて迅速かつ確実に利用可能化するインスタンス利用促進システムの提供を目的とする。【解決手段】本発明のインスタンス利用促進システム１は、複数のインスタンスの中からアイドル状態のものを検出してこれを利用可能状態とするシステムであって、メトリクス収集部１００と、稼働状態が不明なインスタンスの中から、稼働状態を問い合わせるインスタンスを選定するインスタンス選定部３００と、インスタンスの稼働状態をユーザに問い合わせ、稼働状態、アイドル状態および不明状態のいずれかのラベルをインスタンスに付ける問合せ部４００と、ラベル付けされたインスタンスのうちアイドル状態のインスタンスを利用可能化するインスタンス利用可能化部５００と、収集されたメトリクスとラベルとを用い、新たなインスタンスの稼働状態を判別するための機械学習を行う機械学習部６００とを備えている。【選択図】図１

Description

本発明は、インスタンス利用促進システムに関する。
ネットワーク上のコンピュータ資源を使用して各種計算を実行させるようなクラウドコンピューティングでは、いくつかのユーザに多くのコンピュータ資源が割り当てられることがあるが、これらの中には単に割り当てられているのみで実際には使用されていないものも見受けられる。
このような状況下において多くのユーザがコンピュータ資源の使用を希望する場合、利用可能な資源はあるものの、既に他のユーザに上記資源が割り当てられてるため、結果的に使用できる資源が不足して効率よく計算を行えないことがある。
このような中、コンピュータ資源としてのインスタンスが不足するのを回避するため、例えば、ネットワーク上の各インスタンスから収集したメトリクスと上記インスタンスの実際の稼働状況との対応関係を教師データとして機械学習させた後、学習済みの機械学習法を用いて各インスタンスの稼働状況を推定することでアイドル状態のインスタンスの再利用を促す技術が提案されている（例えば、非特許文献１参照）。
このような技術によれば、十分に機械学習を行った後には、複数のインスタンスの中からアイドル状態のインスタンスを精度よく見つけて再び利用可能化することができ、全体としてインスタンスが不足するのを回避することが期待される。
Ｋｅｅ Ｋｉｍ，ｅｔ ａｌ，２００６，Ａ Ｓｕｐｅｒｖｉｓｅｄ Ｌｅａｒｎｉｎｇ Ｍｏｄｅｌ ｆｏｒ Ｉｄｅｎｔｉｆｙｉｎｇ Ｉｎａｃｔｉｖｅ ＶＭｓ ｉｎ Ｐｒｉｖａｔｅ Ｃｌｏｕｄ Ｄａｔａ Ｃｅｎｔｅｒｓ． Ｉｎ Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ ｔｈｅ Ｉｎｄｕｓｔｒｉａｌ Ｔｒａｃｋ ｏｆ ｔｈｅ １７ｔｈ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｍｉｄｄｌｅｗａｒｅ Ｃｏｎｆｅｒｅｎｃｅ （Ｍｉｄｄｌｅｗａｒｅ Ｉｎｄｕｓｔｒｙ ’１６）． ＡＣＭ．
ここで、上述したような技術を用いる場合、精度よくインスタンスの稼働状況を分類するためには前もって十分に機械学習を行わせる必要があり、このような機械学習をさせるためにはトレーニングに用いる十分な数の教師データ（ラベル）が予め存在していることが前提となる。
しかしながら、上述したような従来の技術を用いる場合、クラウドコンピューティング規模でのラベルを予め準備するのは難しく、全てのユーザにラベル付けに用いる情報の提供を依頼するのも現実的には難しい。このため、単に機械学習の手法を導入しただけでは精度よくアイドル状態のインスタンスを検出することができず、結果として未使用のインスタンスを早期かつ確実に利用できるようにすることが困難である。
本発明は、以上のような事情に基づいてなされたものであり、その目的は、たとえ機械学習のための教師データ（ラベル）が十分に揃っていない状態であっても、アイドル状態のインスタンスを見つけて迅速かつ確実に利用可能化することができるインスタンス利用促進システムを提供することにある。
本発明は、
（１）クラウドインフラストラクチャー上で用いる複数のインスタンスの中から、アイドル状態のインスタンスを検出して前記アイドル状態のインスタンスを利用可能状態とするインスタンス利用促進システムであって、
前記複数のインスタンスから各インスタンスのメトリクスを収集するメトリクス収集部と、
前記複数のインスタンスのうちの稼働状態が不明なインスタンスの中から、稼働状態を問い合わせるインスタンスを選定するインスタンス選定部と、
前記インスタンス選定部により選定されたインスタンスの稼働状態をユーザに問い合わせると共に、この問い合わせた結果に基づき、稼働状態、アイドル状態および不明状態のいずれかのラベルを前記インスタンスに付ける問合せ部と、
前記問合せ部によりラベル付けされたインスタンスのうち、アイドル状態のラベルが付けられたインスタンスを利用可能化するインスタンス利用可能化部と、
前記メトリクス収集部により収集された各インスタンスのメトリクスと、前記問合せ部により付けられた前記各インスタンスのラベルとを用い、新たなインスタンスの稼働状態を判別するための機械学習を行う機械学習部と、を備えていることを特徴とするインスタンス利用促進システム、
（２）インスタンス選定部によるインスタンスの選定と、問合せ部によるユーザへの問合せおよびインスタンスへのラベル付けと、インスタンス利用可能化部によるインスタンスの利用可能化とが繰り返し行われる前記（１）に記載のインスタンス利用促進システム、
（３）インスタンス選定部が、ヒューリスティックな手法を用いて稼働状態を問い合わせるインスタンスを選定する前記（１）または（２）に記載のインスタンス利用促進システム、
（４）ヒューリスティックな手法が、ログ変換を用いた手法とスケール変換を用いた手法とを組み合せたものである前記（３）に記載のインスタンス利用促進システム、
（５）マルチテナントクラウド環境下で用いられる前記（１）から（４）のいずれか１項に記載のインスタンス利用促進システム、並びに
（６）問合せ部が、チャットボットインターフェースを介してインスタンスの稼働状態を問い合わせる前記（１）から（５）のいずれか１項に記載のインスタンス利用促進システム
に関する。
なお、本明細書において「インスタンス」とは、物理的なコンピュータ（物理サーバ）上で起動される、ソフトウェアによって構築された仮想的なコンピュータ（仮想マシン、ＶＭ：Ｖｅｒｔｕａｌ Ｍａｃｈｉｎｅ）を意味する。また、「マルチテナントクラウド環境」とは、機材やソフトウェア、データベースなどを複数の企業（組織）で共有するクラウドコンピューティング環境を意味する。また、「チャットボットインターフェース」とは、問合せ部からの問合せをユーザとの間で自動的にやりとりする単なるマンマシンインターフェースを意味する。
本発明は、たとえ機械学習のための教師データ（ラベル）が十分に揃っていない状態であっても、アイドル状態のインスタンスを見つけて迅速かつ確実に利用可能化することができるインスタンス利用促進システムを提供することができる。
本発明の一実施形態を示す概略ブロック図である。 図１のシステムにより収集したメトリクス情報の一例を示す概略図である。 図２のメトリクス情報をインスタンスごとに整理したものの一例を示す概略図である。 図２のメトリクス情報をインスタンスごとに整理したものの一例を示す概略図である。 図３Ｂのメトリクス情報を派生データに変換したもの一例を示す概略図である。 図３Ｂの派生データとラベルとを対応付けたものの一例を示す概略図である。 図１の処理フローを示す概略ブロック図である。 図５の処理フローの繰り返しにより得られたリストの一例を示す概略図である。 図１のインスタンス選定部におけるインスタンス選定処理の一例を示す概略フローチャートである。 インスタンス選定部による処理の具体的な一例を示す概略図であって、リストの一例を示す概略図である。 インスタンス選定部による処理の具体的な一例を示す概略図であって、リストの一例を示す概略図である。 インスタンス選定部による処理の具体的な一例を示す概略図であって、リストの一例を示す概略図である。 インスタンス選定部による処理の具体的な一例を示す概略図であって、リストの一例を示す概略図である。 インスタンス選定部による処理の具体的な一例を示す概略図であって、リストの一例を示す概略図である。 インスタンス選定部による処理の具体的な一例を示す概略図であって、リストの一例を示す概略図である。 インスタンス選定部による処理の具体的な一例を示す概略図であって、リストの一例を示す概略図である。
本発明のインスタンス利用促進システムは、クラウドインフラストラクチャー上で用いる複数のインスタンスの中から、アイドル状態のインスタンスを検出して上記アイドル状態のインスタンスを利用可能状態とするインスタンス利用促進システムであって、上記複数のインスタンスから各インスタンスのメトリクスを収集するメトリクス収集部と、上記複数のインスタンスのうちの稼働状態が不明なインスタンスの中から、稼働状態を問い合わせるインスタンスを選定するインスタンス選定部と、上記インスタンス選定部により選定されたインスタンスの稼働状態をユーザに問い合わせると共に、この問い合わせた結果に基づき、稼働状態、アイドル状態および不明状態のいずれかのラベルを上記インスタンスに付ける問合せ部と、上記問合せ部によりラベル付けされたインスタンスのうち、アイドル状態のラベルが付けられたインスタンスを利用可能化するインスタンス利用可能化部と、上記メトリクス収集部により収集された各インスタンスのメトリクスと、上記問合せ部により付けられた上記各インスタンスのラベルとを用い、新たなインスタンスの稼働状態を判別するための機械学習を行う機械学習部と、を備えていることを特徴とする。
当該インスタンス利用促進システム１は、図１に示すように、例えば、ユーザＭがユーザ端末９００を介してＩａａＳ（Ｉｎｆｒａｓｔｒｕｃｔｕｒｅ ａｓ ａ Ｓｅｒｖｉｃｅ）に接続し、ハイパーバイザーＡＰＩ８２１２を通して物理サーバ８２１中のインスタンス（仮想マシン８２１１）にアクセスすることでこのインスタンスを利用することが可能なクラウドインフラストラクチャー８００が構築されたクラウド環境等に適用される。
以下、本発明の一実施形態について図面を参照して説明するが、本発明は、当該図面に記載の実施形態にのみ限定されるものではない。
図１は、本発明の一実施形態を示す概略ブロック図である。当該インスタンス利用促進システム１は、図１に示すように、概略的に、メトリクス収集部１００と、ストレージ２００と、インスタンス選定部３００と、問合せ部４００と、インスタンス利用可能化部５００と、機械学習部６００とにより構成されている。
メトリクス収集部１００は、複数のインスタンスから各インスタンスのメトリクス（例えば、ＣＰＵ占有時間、未使用メモリ、パケット通信量など）を収集する。具体的には、メトリクス収集部１００は、例えば、図１に示すように、計算クラスタ８２０における物理サーバ８２１中のインスタンス（仮想マシン８２１１）それぞれから、ＡＰＩ（Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｇｒａｍ Ｉｎｔｅｒｆａｃｅ）８２１２を介して各インスタンスのメトリクスを取得し、この取得したメトリクス情報をストレージ２００に格納する。なお、メトリクス情報を取得するタイミングは、例えば、定期（５分間隔など）および不定期のいずれであってもよいが、後述する問合せ部４００による問合せ時を含むように決定されることが好ましい。
ここで、図２は、図１のシステムにより収集したメトリクス情報の一例を示す概略図である。複数のインスタンスは、各インスタンスを識別するためのインスタンスＩＤが付されており、このインスタンスＩＤに上記メトリクス情報が紐付けられている。なお、インスタンスの稼働が中断したり停止する場合、その中断等している間は、当該インスタンスからはメトリクス情報が発せられない。
インスタンス選定部３００は、複数のインスタンスのうちの稼働状態が不明なインスタンスの中から、稼働状態を問い合わせるインスタンスを選定する。このインスタンス選定部３００にて選定されるインスタンスは、問合せ部４００による問合せの負荷を軽減する観点から、通常、稼働状態が不明なインスタンスのうちの一部のインスタンスとなるが、上記不明なインスタンスの全部であってもよい。
インスタンス選定部３００におけるインスタンスの選定手法としては、特に限定されないが、ヒューリスティックな手法（ｈｅｕｒｉｓｔｉｃ ａｌｇｏｒｉｔｈｍ）を用いて稼働状態を問い合わせるインスタンスを選定することが好ましい。上記ヒューリスティックな手法としては、例えば、ログ変換を用いた手法、スケール変換を用いた手法、これらログ変換を用いた手法とスケール変換を用いた手法とを組み合わせた手法等が挙げられる。これらの中で、ヒューリスティックな手法としては、後述するログ変換を用いた手法とスケール変換を用いた手法とを組み合せたものであることが好ましい。
このように、当該インスタンス利用促進システム１は、インスタンス選定部３００がヒューリスティックな手法を用いたものであることで、稼働状態が不明のインスタンスの中から、アイドル状態の可能性が高いインスタンスを迅速に選定することができ、特に、上記手法がログ変換を用いた手法とスケール変換を用いた手法とを組み合せたものであることで、各手法それぞれにおいて比較的高くランク付けされインスタンスが選定されるため、ヒューリスティックな手法による選定をより的確に行うことができる。
問合せ部４００は、インスタンス選定部３００により選定されたインスタンスの稼働状態をユーザＭに問い合わせると共に、この問い合わせた結果に基づき、稼働状態、アイドル状態および不明状態のいずれかのラベルをインスタンスに付ける。具体的には、この問合せ部４００は、例えば、ユーザＭがキープするインスタンスの使用状況の問合せをユーザ端末９００に発信したり、上記問合せの回答をユーザ端末９００から受信するユーザ通知モジュール４１０を備えており、この問合せで得られたユーザＭからの回答を教師データ（ラベル）としてリストＬ１に記録し、これを各インスタンスのメトリクス情報に対応付けてストレージ２００に格納する（例えば、図４参照）。
なお、問合せ部４００は、ユーザ端末９００が有するチャットボットインターフェース９１０を介して、問合せ対象のインスタンスの稼働状態をそのユーザＭに問い合わせることが好ましい。チャットボットインターフェース９１０としては、例えば、公知のチャットボットインターフェース等を用いることができる。これにより、手間を掛けずに効率よくインスタンスの稼働状態を問い合わせることができる。
なお、インスタンスの稼働状態を表すラベルとしては、例えば、アイドル状態を肯定するもの（ｉｄｌｅ）、アイドル状態を否定するもの（ａｃｔｉｖｅ）、およびユーザからの回答が得られないもの（ｕｎｋｎｏｗｎ）等が挙げられる。
インスタンス利用可能化部５００は、問合せ部４００によりラベル付けされたインスタンスのうち、アイドル状態のラベル（ｉｄｌｅ）が付けられたインスタンスを利用可能化する。具体的には、インスタンス利用可能化部５００は、例えば、アイドル状態のラベルが付けられたインスタンスＩＤの情報をクラウドインフラストラクチャー８００中の管理クラスタ８１０に送信し、管理クラスタ８１０の制御サーバ８１１を介して物理サーバ８２１中の該当するインスタンス（仮想マシン８２１１）を開放することにより新たに利用できる状態に移行させる。
機械学習部６００は、メトリクス収集部１００により収集された各インスタンスのメトリクスと、問合せ部４００により付けられた各インスタンスのラベルとを用い、新たなインスタンス（稼働状態が不明なインスタンス）の稼働状態を判別するための機械学習を行う。機械学習部６００が行う学習方法としては特に限定されず、例えば、深層学習などの公知の技術等を用いることができる。
ここで、当該インスタンス利用促進システム１は、インスタンス選定部３００によるインスタンスの選定と、問合せ部４００によるユーザＭへの問合せおよびインスタンスへのラベル付けと、インスタンス利用可能化部５００によるインスタンスの利用可能化とが繰り返し行われるシステムであることが好ましい。具体的には、当該インスタンス利用促進システム１は、図６に示すように、例えば、インスタンスＡ、Ｂ、Ｃの稼働状況が記録された元のリスト（図６の「繰り返し（１回目）」のリストＬ２１参照）を用い、「ｕｎｋｎｏｗｎ」のインスタンスＡ、Ｂ、Ｃについての問合せ結果に基づく稼働状態の更新と、インスタンス選定部３００により新たに選定された「ｕｎｋｎｏｗｎ」のインスタンスＤの追加と行うことで上記元のリストＬ２１を更新する処理を行い（図６の「繰り返し（２回目）」のリストＬ２２参照）、引き続き同様に処理してリストＬ２２を更新する（図６の「繰り返し（３回目）」のリストＬ２３参照）。なお、図示していないが、上記繰り返しは継続して行うことができる。
このようにインスタンス選定部３００等の処理を繰り返し行うシステムとすることで、稼働状況が把握されるインスタンスの数を徐々に増やしていくことができ、問合せの負荷（ひいては、問合せによるユーザＭへの負荷）を抑制しつつ、未使用のインスタンスをより効率よく利用可能化することができる。
なお、上述したメトリクス収集部１００、インスタンス選定部３００、問合せ部４００、インスタンス利用可能化部５００および機械学習部６００が実行する各処理は、例えば、図示していない中央演算処理装置（ＣＰＵ）、メモリおよび記憶装置、並びにこれらを接続するバス等を備えたハードウェアを用い、このハードウェア上にて所定のコンピュータプログラムを動作させることで実現することができる。
次に、当該インスタンス利用促進システム１を用いた処理フローの一例について説明する。図５は、当該インスタンス利用促進システム１の処理フローを示す概略ブロック図である。当該インスタンス利用促進システム１では、図５に示すように、まず、メトリクス収集部１００が、各インスタンスから当該インスタンスのメトリクス情報（生データ）を定期または不定期で収集する（ステップＳ５０１）。上記生データは、例えば、インスタンスＩＤで識別されるインスタンスについて収集した、収集時刻（時刻スタンプ）に対するＣＰＵ稼働時間、通信パケット量、未使用メモリ量などの時系列のデータを含んでいる（図２、図３（ａ）、（ｂ）参照）。
次いで、メトリクス収集部１００が、ステップＳ５０１で収集したメトリクス情報（生データ）を派生データに変換する（ステップＳ５０２）。派生データは、インスタンスＩＤで識別される一つのインスタンスについて収集された一連のメトリクスのデータセットで構成されており、収集した全ての時刻におけるメトリクスを含んでいる。この派生データは、インスタンスごとに一つのエントリを構成し、各エントリがリストに記録される。
次に、インスタンス選定部３００が、派生データが作成されたインスタンスのうち、稼働状態の問合せを行わないインスタンスを除外する判断を行い（ステップＳ５０３）、除外すると判断されたインスタンスを選り分ける（ステップＳ５０４）。このインスタンス選定部３００により選り分けられるインスタンスとしては、例えば、アイドル状態を否定するラベル（ａｃｔｉｖｅ）が付けられたものが挙げられる。
次に、メトリクス収集部１００は、ステップＳ５０３にて除外したインスタンス以外のインスタンスについての派生データを、ストレージ２００中に新規データまたは更新データとして格納する（ステップＳ５０５）。
次いで、インスタンス選定部３００は、稼働状態を問い合わせるインスタンスを選定するステップＳ５０６）。このステップで用いる選定手法としては、例えば、後述するログ関数およびスケール関数を組み合わせた手法などのヒューリスティックな手法等である。
次に、問合せ部４００は、インスタンス選定部３００により選定されたインスタンスについての稼働状態を、例えば、チャットボットインターフェース９１０を介してユーザＭに問い合わせる（ステップＳ５０７）。この際、ユーザＭからの応答は、アイドル状態を肯定、アイドル状態を否定、および回答無しのいずれかに分類され、問合せ部４００は、上記応答に基づき、図４に示すようなリストＬ１中にラベルを新規に記録、または更新する（ステップＳ５０８）。
次に、インスタンス利用可能化部５００が、問合せ部４００によりアイドル状態のラベルが付けられたインスタンスを再利用できるように処理する（ステップＳ５０９）。具体的には、インスタンス利用可能化部５００は、例えば、図１に示す管理クラスタ８１０の制御サーバ８１１に、インスタンスＩＤとこのインスタンスＩＤのインスタンスが再利用が可能であることを示す信号とを送信し、制御サーバ８１１、ネットワークサーバ８１２、データベースサーバ８１３等を介して上記インスタンスを利用可能状態にする。
次に、機械学習部６００が、既に収集された各インスタンスのメトリクスと、当該インスタンスに付けられたラベルとを用い、新たなインスタンスの稼働状態を判別するための機械学習を行う（ステップＳ５１０）。次いで、ステップＳ５１０を実行した後、必要に応じてステップＳ５０１に戻り、上述したステップＳ５０１〜Ｓ５１０を繰り返して実行する。
次に、上述したインスタンス選定部３００にて実行するインスタンスの選定について、
ログ変換を用いた手法とスケール変換を用いた手法とを組み合せたヒューリスティックな手法を例にとって詳述する。図７は、当該インスタンス利用促進システム１のインスタンス選定部３００におけるインスタンス選定処理の一例を示す概略フローチャートであり、図８Ａ〜図８Ｇは、上記処理の具体的な一例を示す概略図である。
本手法は、まず、各インスタンスの派生データが記録されたリストＬ３１をストレージ２００から取得する（ステップＳ７０１）。次いで、取得したリストＬ３１を用い、このリストＬ３１中のデータをログ変換（具体的には、「ｌｏｇ１ｐ」関数の適用）（図８ＢのリストＬ３２参照）する（ステップＳ７０２１）と共に、上記派生データをスケール変換（平均値が中央になるように各値をセンタリングし、これを標準偏差で除する変換）する（図８ＣのリストＬ３３参照）（ステップＳ７０２２）。
次に、クラウド管理者により意図的にアイドル状態に設定された基準インスタンスについてのメトリクスの平均値を計算（図８ＤのリストＬ３４参照）（ステップＳ７０３１）した後、各インスタンスのメトリクスの上記平均値までの幾何学的距離を計算する（図８ＥのリストＬ３５参照）（ステップＳ７０４１）。次いで、この幾何学的距離に基づき、一つの派生データに対する上記ログ変換に基づくランク付けを行う（図８ＦのリストＬ３６参照）（ステップＳ７０５１）。なお、図７中のスケール変換に関するステップＳ７０３２、Ｓ７０４２、Ｓ７０５２は、それぞれ上述したステップＳ７０３１、Ｓ７０４１、Ｓ７０５１と同様であるので、各ステップの説明および図面を省略する。
次に、派生データごとに求められたログ変換およびスケール変換による二つのランクを合計し（ステップＳ７０６）、この合計により最終的なランクを求めてリストに記録し（図８ＧのリストＬ３７参照）（ステップＳ７０７）、この最終的なランクに基づき問い合わせるインスタンスを選定する（ステップＳ７０８）。
ここで、ヒューリスティックな手法が正確であればあるほど、選定したインスタンスがアイドル状態である可能性が高まり、結果的にインスタンスの利用可能化を促進することができる。なお、ステップＳ７０１〜Ｓ７０８の処理を数回繰り返したときの正確さは、平均で８０％になる。
なお、当該インスタンス利用促進システム１は、マルチテナントクラウド環境下で用いられることが好ましい。このように、当該インスタンス利用促進システム１がマルチテナントクラウド環境下で用いられることで、例えば、物理サーバ８２１を制御するオペレーティングシステム（ＯＳ）が複数混在するような多様なクラウド環境下であっても、未使用のインスタンスを効率よく利用可能化することができる。
また、当該インスタンス利用促進システム１は、パブリッククラウドインフラストラクチャー（クラウドプロバイダーなどが提供するクラウドコンピューティング環境を、企業（組織）をはじめとした不特定多数のユーザにインターネットを通じて提供できるように構築したクラウドインフラストラクチャー）およびプライベートクラウドインフラストラクチャー（クラウドの技術を用いて一つの企業（組織）のためだけに構築したクラウドインフラストラクチャー）のいずれにも適用することができるが、プライベートクラウドインフラストラクチャー上で用いる場合、同一企業（組織）内の演算処理をより効率よく行うことができる点で、プライベートクラウドインフラストラクチャーに好適に適用することができる。
以上のように、当該インスタンス利用促進システム１は、上記構成であるので、たとえ機械学習のための教師データ（ラベル）が十分に揃っていない状態であっても、アイドル状態のインスタンスを見つけて迅速かつ確実に利用可能化することができ、クラウドインフラストラクチャー８００全体を効率よく運用することができる。
なお、本発明は、上述した実施形態の構成に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内での全ての変更が含まれることが意図される。
例えば、上述した実施形態では、インスタンス利用可能化部５００によるインスタンスの利用可能化が、問合せ部４００の問合せに基づきアイドル状態のラベルが付けられたインスタンスについて行われるインスタンス利用促進システム１について説明したが、上記インスタンス利用可能化部が、問合せ部により得られた各インスタンスの稼働情報と、上述した機械学習部による機械学習結果を用いて判定した各インスタンスの稼働に関する情報とを組合せてインスタンスの利用可能化を実行するインスタンス利用促進システムであってもよい。
１ インスタンス利用促進システム
１００ メトリクス収集部
３００ インスタンス選定部
４００ 問合せ部
５００ インスタンス利用可能化部
６００ 機械学習部
８００ クラウドインフラストラクチャー
９１０ チャットボットインターフェース
８２１１ 仮想マシン（インスタンス）

Claims (6)

  1. クラウドインフラストラクチャー上で用いる複数のインスタンスの中から、アイドル状態のインスタンスを検出して前記アイドル状態のインスタンスを利用可能状態とするインスタンス利用促進システムであって、
    前記複数のインスタンスから各インスタンスのメトリクスを収集するメトリクス収集部と、
    前記複数のインスタンスのうちの稼働状態が不明なインスタンスの中から、稼働状態を問い合わせるインスタンスを選定するインスタンス選定部と、
    前記インスタンス選定部により選定されたインスタンスの稼働状態をユーザに問い合わせると共に、この問い合わせた結果に基づき、稼働状態、アイドル状態および不明状態のいずれかのラベルを前記インスタンスに付ける問合せ部と、
    前記問合せ部によりラベル付けされたインスタンスのうち、アイドル状態のラベルが付けられたインスタンスを利用可能化するインスタンス利用可能化部と、
    前記メトリクス収集部により収集された各インスタンスのメトリクスと、前記問合せ部により付けられた前記各インスタンスのラベルとを用い、新たなインスタンスの稼働状態を判別するための機械学習を行う機械学習部と、を備えていることを特徴とするインスタンス利用促進システム。
  2. インスタンス選定部によるインスタンスの選定と、問合せ部によるユーザへの問合せおよびインスタンスへのラベル付けと、インスタンス利用可能化部によるインスタンスの利用可能化とが繰り返し行われる請求項１に記載のインスタンス利用促進システム。
  3. インスタンス選定部が、ヒューリスティックな手法を用いて稼働状態を問い合わせるインスタンスを選定する請求項１または請求項２に記載のインスタンス利用促進システム。
  4. ヒューリスティックな手法が、ログ変換を用いた手法とスケール変換を用いた手法とを組み合せたものである請求項３に記載のインスタンス利用促進システム。
  5. マルチテナントクラウド環境下で用いられる請求項１から請求項４のいずれか１項に記載のインスタンス利用促進システム。
  6. 問合せ部が、チャットボットインターフェースを介してインスタンスの稼働状態を問い合わせる請求項１から請求項５のいずれか１項に記載のインスタンス利用促進システム。
JP2017222764A 2017-11-20 2017-11-20 インスタンス利用促進システム Active JP6916096B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017222764A JP6916096B2 (ja) 2017-11-20 2017-11-20 インスタンス利用促進システム
GB201818373A GB2569872B (en) 2017-11-20 2018-11-12 Instance usage facilitating system
US16/192,835 US10637741B2 (en) 2017-11-20 2018-11-16 Instance usage facilitating system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017222764A JP6916096B2 (ja) 2017-11-20 2017-11-20 インスタンス利用促進システム

Publications (2)

Publication Number Publication Date
JP2019095898A true JP2019095898A (ja) 2019-06-20
JP6916096B2 JP6916096B2 (ja) 2021-08-11

Family

ID=64739429

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017222764A Active JP6916096B2 (ja) 2017-11-20 2017-11-20 インスタンス利用促進システム

Country Status (3)

Country Link
US (1) US10637741B2 (ja)
JP (1) JP6916096B2 (ja)
GB (1) GB2569872B (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7229888B2 (ja) 2019-09-13 2023-02-28 株式会社日立製作所 リソースの利用効率の最適化を支援するシステム及び方法
US11605012B2 (en) * 2020-02-28 2023-03-14 Intuit Inc. Framework for processing machine learning model metrics

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02235170A (ja) * 1989-03-08 1990-09-18 Sharp Corp ニューラル・ネットワークの学習方法
WO2010109681A1 (ja) * 2009-03-25 2010-09-30 株式会社日立製作所 コンピュータシステム、コンピュータシステムのリソース資源管理サーバ、及びコンピュータシステムのリソース管理方法
JP2014191368A (ja) * 2013-03-26 2014-10-06 Fujitsu Ltd 管理プログラム、装置及び方法
WO2017073373A1 (ja) * 2015-10-30 2017-05-04 株式会社モルフォ 学習システム、学習装置、学習方法、学習プログラム、教師データ作成装置、教師データ作成方法、教師データ作成プログラム、端末装置及び閾値変更装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8880687B1 (en) * 2012-02-06 2014-11-04 Netapp, Inc. Detecting and managing idle virtual storage servers
US9513950B2 (en) * 2012-07-25 2016-12-06 Vmware, Inc. Dynamic resource configuration based on context
US9578106B2 (en) * 2014-02-26 2017-02-21 Avaya Inc. System and method for binding a virtual desktop infrastructure host and media soft client together
US9405572B2 (en) * 2014-04-07 2016-08-02 International Business Machines Corporation Optimized resource allocation and management in a virtualized computing environment
US10909980B2 (en) * 2017-02-27 2021-02-02 SKAEL, Inc. Machine-learning digital assistants
US20180285595A1 (en) * 2017-04-04 2018-10-04 Ip Street Holdings Llc Virtual agent for the retrieval and analysis of information

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02235170A (ja) * 1989-03-08 1990-09-18 Sharp Corp ニューラル・ネットワークの学習方法
WO2010109681A1 (ja) * 2009-03-25 2010-09-30 株式会社日立製作所 コンピュータシステム、コンピュータシステムのリソース資源管理サーバ、及びコンピュータシステムのリソース管理方法
JP2014191368A (ja) * 2013-03-26 2014-10-06 Fujitsu Ltd 管理プログラム、装置及び方法
WO2017073373A1 (ja) * 2015-10-30 2017-05-04 株式会社モルフォ 学習システム、学習装置、学習方法、学習プログラム、教師データ作成装置、教師データ作成方法、教師データ作成プログラム、端末装置及び閾値変更装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
木下順史、外３名: "オープンソースソフトウェアで実現するクラウドサービス", 日立評論, vol. 第99巻第3号, JPN6021010310, 20 May 2017 (2017-05-20), pages 72 - 76, ISSN: 0004472556 *

Also Published As

Publication number Publication date
US10637741B2 (en) 2020-04-28
US20190158362A1 (en) 2019-05-23
GB201818373D0 (en) 2018-12-26
GB2569872B (en) 2020-01-01
GB2569872A (en) 2019-07-03
JP6916096B2 (ja) 2021-08-11

Similar Documents

Publication Publication Date Title
US11392843B2 (en) Utilizing a machine learning model to predict a quantity of cloud resources to allocate to a customer
US10891571B2 (en) Task management platform
JP7122713B2 (ja) 機械学習又は推論のための計算機システム及び方法
US20180060395A1 (en) Selecting interruptible resources for query execution
US10380520B2 (en) Automated ticket resolution
US9940162B2 (en) Realtime optimization of compute infrastructure in a virtualized environment
CN110032576B (zh) 一种业务处理方法以及装置
US20090077235A1 (en) Mechanism for profiling and estimating the runtime needed to execute a job
US11329869B2 (en) Self-monitoring
US10771562B2 (en) Analyzing device-related data to generate and/or suppress device-related alerts
JP2015109074A (ja) ルールの自動化された生成および動的な更新
JP6916096B2 (ja) インスタンス利用促進システム
Bellini et al. A knowledge base driven solution for smart cloud management
Bellini et al. Managing cloud via smart cloud engine and knowledge base
US20210263718A1 (en) Generating predictive metrics for virtualized deployments
CN113360321B (zh) 微服务重试调用方法、装置、电子设备及存储介质
JP2016181022A (ja) 情報処理装置、情報処理プログラム、情報処理方法、及びデータセンタシステム
Fattah et al. Long-term IaaS selection using performance discovery
US11770295B2 (en) Platform for establishing computing node clusters in different environments
US11580466B2 (en) Utilizing machine learning models to aggregate applications and users with events associated with the applications
CN111459737B (zh) 问题定位方法、装置、计算机设备及存储介质
JP2018032245A (ja) 計算機システム及びリソース制御方法
JP6678813B2 (ja) クラウド管理システム、及びクラウド管理方法
EP3719719A1 (en) Utilizing a machine learning model to predict a quantity of cloud resources to allocate to a customer
US11941421B1 (en) Evaluating and scaling a collection of isolated execution environments at a particular geographic location

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200303

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210317

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210512

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210622

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210715

R150 Certificate of patent or registration of utility model

Ref document number: 6916096

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150