KR101691578B1 - 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체 - Google Patents

가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체 Download PDF

Info

Publication number
KR101691578B1
KR101691578B1 KR1020160068108A KR20160068108A KR101691578B1 KR 101691578 B1 KR101691578 B1 KR 101691578B1 KR 1020160068108 A KR1020160068108 A KR 1020160068108A KR 20160068108 A KR20160068108 A KR 20160068108A KR 101691578 B1 KR101691578 B1 KR 101691578B1
Authority
KR
South Korea
Prior art keywords
resource amount
virtualized
amount
resource
host device
Prior art date
Application number
KR1020160068108A
Other languages
English (en)
Inventor
김형근
정성현
Original Assignee
주식회사 모비젠
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 모비젠 filed Critical 주식회사 모비젠
Priority to KR1020160068108A priority Critical patent/KR101691578B1/ko
Application granted granted Critical
Publication of KR101691578B1 publication Critical patent/KR101691578B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/301Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is a virtual computing platform, e.g. logically partitioned systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061Partitioning or combining of resources
    • G06F9/5077Logical partitioning of resources; Management or configuration of virtualized resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Quality & Reliability (AREA)
  • Debugging And Monitoring (AREA)

Abstract

본 발명의 일 실시 예는, 하나의 호스트장치상에 적어도 두 개 이상의 가상화된 장치를 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법으로서, 상기 가상화된 장치마다 할당된 할당자원량을 파악하는 할당자원량파악단계; 상기 가상화된 장치들이 상기 할당자원량 내에서 사용한 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하는지 여부를 파악하는 자원량초과파악단계; 및 상기 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하면, 상기 파악된 할당자원량을 기초로 상기 가상화된 장치들이 상기 호스트장치의 최대 자원량 내에서 사용한 제2사용자원량을 산출하는 제2사용자원량산출단계;를 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법을 개시한다.

Description

가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체 {Apparatus and method for collecting monitoring data of virtualized apparatus in virtualized environment and computer readable recording medium}
본 발명은 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치 및 그 방법에 관한 것으로서, 보다 상세하게는 호스트장치에 포함되어 구현되는 가상화된 장치들이 사용하는 자원량이 가상화 방식에 따라 정확하지 않게 표현되는 현상을 제거하고, 실질적인 사용량에 대한 모니터링 데이터를 수집하게 해 주는 모니터링 데이터 수집 장치 및 그 방법에 관한 것이다.
정보통신기술이 발전함에 따라서, 물리적으로 한정적인 자원을 가지고 있는 서버를 좀 더 효율적으로 사용하기 위한 기술 중에 장치의 가상화(Virtualization)가 있다. 가상화가 적용된 서버는 서버에 모든 사용자가 동시에 접근하지는 않는다는 점을 기초로, 한정적인 자원으로 수많은 사용자가 요구하는 데이터의 처리를 할 수 있다는 점 때문에 이에 대한 수요는 점차 늘어가고 있으며, 수많은 데이터의 입출력이 있는 특성상 가상화된 장치에 저장되거나, 가상화된 장치가 직접 처리하는 각종 데이터, 가상화된 장치가 사용하고 있는 자원의 현황에 대한 데이터를 효과적으로 모니터링하는 방법은 중요하다.
장치의 가상화 방식으로는, 하드웨어적으로 고정된 성능의 서버 자체를 소프트웨어적으로 가상화하는 가상머신(Virtual Machine)방식과, 서버에서 처리되는 특정 프로세스 환경만 가상화하는 컨테이너(Container)방식이 있다. 가상머신 방식과 컨테이너 방식은 각각의 장점 및 단점이 있기 때문에 대규모 인프라를 구축하는 경우, 하나의 서버 장치에 대해서 컨테이너 방식의 가상화와 가상머신 방식의 가상화가 동시에 사용되는 경우가 많아지고 있으며, 두 가지 방식이 공존하는 것에 의해 서버의 물리적 자원의 관리가 더욱 복잡해지고 있는 실정이다.
먼저, 가상머신은 서버와 개념적으로는 거의 동일한 기능을 제공하지만 실제로는 서버와는 분리되어 융통성 있게 운용되도록 물리적 장치를 가상화시킨 개념이며, 현재 대다수의 클라우드 시스템(Cloud System)을 구현하는 데에 사용되고 있는 전통적인 가상화 방식이다.
가상머신은 단어 그대로 ‘머신’수준의 가상화이기 때문에, 호스트머신 및 가상머신을 정의하는 관리자는 머신을 구성할 각종 ‘자원’을 지정함으로써, 고유한 성능(Specification)의 머신을 정의할 수 있다. 여기서 ‘자원’이라고 함은, CPU, Memory, Disk, Network 등을 의미하며, 관리자는 가상머신의 자원을 할당할 때, 각 자원을 구성하는 물리적인 대상의 개수 및 용량을 소프트웨어적으로 지정함으로써, 원하는 수준의 성능을 가진 가상머신을 생성할 수가 있다. 위와 같은 과정을 통해 생성된 가상머신은 실제 하드웨어와 동일한 방식으로 동작되도록 시뮬레이션되기 때문에, 그 속에 임의의 운영체제(Operating System; OS)를 탑재할 수가 있다.
가상머신을 실행시키는 바탕이 되는 머신은 ‘호스트(Host)’ 또는 ‘호스트 머신(Host Machine)’라고 호칭되며, 호스트 머신에 의해 실행되는 가상머신은 ‘게스트(Guest)’ 또는 ‘게스트 머신(Guest Machine)’라고 호칭된다. 또한,‘호스트’와 ‘게스트’ 각각에 대응되는 운영체제(OS)를 ‘호스트OS’, ‘게스트OS’라고 호칭한다. 여기서 ‘가상머신’에는 호스트OS와 다른 종류의 OS를 게스트OS로 설치하는 것이 가능하다.
예를 들어, 관리자는 8 core CPU, 32GB Memory, 8TB Disk를 가진 ‘실제 머신(Bare Metal Machine)’에 리눅스(Linux)를 설치하고, 그것을 ‘호스트 머신’으로 생각하면, 리눅스가 호스트OS가 된다. 관리자는 호스트OS 내에서, 1 core CPU, 4GB Memory, 1TB Disk를 사용하도록 ‘자원(Resource)’이 한정된 ‘가상머신’을 정의하고, 해당 가상머신에 윈도우를 OS로 설치할 수 있다. 이 경우, 윈도우가 설치된 가상머신은 게스트, 게스트 머신, 게스트 가상머신 등으로 다양하게 호칭될 수 있으며, 윈도우는 게스트OS가 된다. 위와 같이, 가상머신 형태의 가상화는 호스트의 OS와 게스트의 OS가 서로 달라도 상관없으며, 이것이 가능한 이유는 호스트 OS에서 가상머신을 ‘머신’수준으로 시뮬레이션해 주기 때문이다.
‘가상머신’을 새로 구동시킬 경우, 해당 ‘가상머신’이 점유하는 하드웨어 자원(CPU, Memory, Disk 등)은 원칙적으로는 호스트 머신의 자원의 제약을 받는다. 즉, 실제 머신인 호스트 머신의 최대 CPU 코어 또는 최대 메모리 용량에 한하여 게스트 머신의 CPU 코어나 메모리 용량을 할당하는 것이 일반적이다. 예를 들어, 8 Core CPU, 32GB Memory, 8TB Disk인 실제머신에는 1 Core CPU, 4GB Memory, 1TB Disk인 가상머신을 최대 8개까지 설치할 수 있다.
다만, 호스트머신에 따라 할당된 가상머신의 자원활용률이 언제나 최대값을 기록하는 것이 아니므로, 실제머신을 기준으로 봤을 때, 실제머신의 최대 CPU코어 또는 최대 메모리 용량을 초과하여 가상머신을 정의하더라도, 특별한 경우가 아니라면 가상머신의 자원사용량의 총합은 실제머신의 최대 자원량을 초과하지 않게 된다. 즉, 실제머신에서 호스트머신 및 가상머신을 정의하는 관리자로서는 실제머신의 활용도를 극대화하기 위해서, 자원의 초과할당(Over-Commit)을 이용한다. 초과할당의 경우, 하나의 물리적인 머신이 제공할 수 있는 최대 자원보다 더 큰 자원을 가상머신들에 할당함에 따라, 각각의 가상머신들은 호스트머신의 물리적 자원 범위 내에서 동작할 때는 문제가 없지만, 물리적 자원보다 더 큰 범위로 동작하려고 할 때, 자원의 부족에 의해 급격히 느려지게 된다.
‘컨테이너’는 또 다른 형태의 가상화 방식으로서 프로세스 가상화의 일종이다. 특히, ‘컨테이너’는 리눅스를 통해서만 구현될 수 있는 기술로서, 리눅스의 특정 프로세스가 점유하는 환경(CPU, Memory, Disk, Network, Library)을 특정 범위로 제약시킴으로써 가상화를 수행하는 방식이다. ‘컨테이너’가상화는 ‘가상머신’방식과 달리, 호스트OS와 게스트OS가 모두 리눅스여야만 하며, 엄밀히 말해 완전한 머신을 시뮬레이션 하는 것은 아니고, 프로세스의 동작 환경만을 제어한다.
즉, ‘컨테이너’가상화는 가상화 수준이 프로세스로 한정되며, 실제의 기능 호출시 호스트OS의 커널(Kernel) 기능을 그대로 사용하기 때문에, 가상머신 방식에 비해 상대적으로 가벼운 특징이 있다. ‘컨테이너’가상화는 CPU, 메모리, 디스크의 범위를 제약하는 ‘Cgroups’(Control Groups)라는 리눅스의 커널 기능을 이용하여 구현되기 때문에, 리눅스OS 커널 수준에서 가상화가 지원되는 것이며, 그에 따라 전술한 것과 같이 호스트 및 게스트의 OS가 모두 리눅스여야만 하는 제약이 따른다.
대한민국 특허공개공보 제2015-0126463호 (2014년 5월 2일 공개)
본 발명이 해결하고자 하는 기술적 과제는, 호스트장치와 그 호스트장치의 자원을 기초로 구현된 가상화된 장치가 있는 가상화 환경에서, 그 가상화된 장치로부터 호스트장치의 최대 자원량을 기준으로 했을 때의 그 가상화된 장치가 사용한 자원량을 모니터링 데이터로서 출력하는 가상화 환경에서의 가상화된 장치의 모니터링 데이터 수집 장치 및 그 방법을 제공하는 데에 있다.
보다 구체적으로, 초과할당(Over-commit) 정책에 따라 호스트장치가 가상장치에 자원을 할당할 경우, 그 가상장치의 자원의 사용을 모니터링할 때에 자원의 사용량이 실제 자원량과 불일치하는 문제가 발생하는데, 본 발명은 이런 불일치를 해소하고, 실제 사용된 자원에 최대한 대응되는 자원 모니터링 데이터를 수집할 수 있는 장치 및 그 방법에 관한 것이다.
상기 기술적 과제를 해결하기 위한 본 발명의 일 실시 예에 따른 모니터링 데이터 수집 방법은, 하나의 호스트장치상에 적어도 두 개 이상의 가상화된 장치를 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법으로서, 상기 가상화된 장치마다 할당된 할당자원량을 파악하는 할당자원량파악단계; 상기 가상화된 장치들이 상기 할당자원량 내에서 사용한 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하는지 여부를 파악하는 자원량초과파악단계; 및 상기 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하면, 상기 파악된 할당자원량을 기초로 상기 가상화된 장치들이 상기 호스트장치의 최대 자원량 내에서 사용한 제2사용자원량을 산출하는 제2사용자원량산출단계;를 포함한다.
상기 방법에 있어서, 상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 총합은 상기 호스트장치의 최대 자원량을 초과하는 것을 특징으로 할 수 있다.
상기 방법에 있어서, 상기 호스트장치에 포함된 가상화된 장치는 적어도 하나 이상의 가상머신(Virtual Machine)과 적어도 하나 이상의 컨테이너(Container)일 수 있다.
상기 방법에 있어서, 상기 제2사용자원량산출단계는, 상기 가상화된 장치들의 제2사용자원량의 총합이 상기 호스트장치의 최대 자원량과 일치하도록, 상기 제2사용자원량을 산출할 수 있다.
상기 방법에 있어서, 상기 제2사용자원량산출단계는, 상기 제1사용자원량의 총합에서 상기 호스트장치의 최대 자원량을 차감하여 초과자원량을 산출하는 초과자원량산출단계; 및 상기 산출된 초과자원량을 상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 비율에 따라 가상화된 장치의 수만큼 분할하는 초과자원량분할단계;를 더 포함하고, 상기 제2사용자원량은 상기 파악된 제1사용자원량에서 상기 분할된 초과자원량을 차감한 것을 특징으로 할 수 있다.
상기 방법은, 기저장된 단위자원사용금액 및 상기 제2사용자원량을 기초로 상기 호스트장치에 포함된 각각의 가상화된 장치에 대한 과금액을 결정하는 과금액결정단계를 더 포함하는 할 수 있다.
상기 방법은, 상기 제2사용자원량의 기초로 상기 호스트장치에 포함된 가상화된 장치들에 대한 우선순위를 결정하는 장치우선순위결정단계; 및 사용자가 입력한 우선순위를 수신하고, 상기 수신된 우선순위에 따라 상기 호스트장치에 포함된 가상화된 장치들 중 적어도 하나 이상의 가상화된 장치에 대한 정보를 출력하는 사용자선택장치출력단계;를 포함할 수 있다.
상기 기술적 과제를 해결하기 위한 본 발명의 다른 일 실시 예에 따른 모니터링 데이터 수집 장치는, 하나의 호스트장치상에 적어도 두 개 이상의 가상화된 장치를 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치로서, 상기 가상화된 장치마다 할당된 할당자원량을 파악하는 할당자원량파악부; 상기 가상화된 장치들이 상기 할당자원량 내에서 사용한 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하는지 여부를 파악하는 자원량초과파악부; 및 상기 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하면, 상기 파악된 할당자원량을 기초로 상기 가상화된 장치들이 상기 호스트장치의 최대 자원량 내에서 사용한 제2사용자원량을 산출하는 제2사용자원량산출부;를 포함한다.
상기 장치에 있어서, 상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 총합은 상기 호스트장치의 최대 자원량을 초과하는 것을 특징으로 할 수 있다.
상기 장치에 있어서, 상기 호스트장치에 포함된 가상화된 장치는 적어도 하나 이상의 가상머신(Virtual Machine)과 적어도 하나 이상의 컨테이너(Container)일 수 있다.
상기 장치에 있어서, 상기 제2사용자원량산출부는, 상기 가상화된 장치들의 제2사용자원량의 총합이 상기 호스트장치의 최대 자원량과 일치하도록, 상기 제2사용자원량을 산출할 수 있다.
상기 장치에 있어서, 상기 제2사용자원량산출부는, 상기 제1사용자원량의 총합에서 상기 호스트장치의 최대 자원량을 차감하여 초과자원량을 산출하는 초과자원량산출부; 및 상기 산출된 초과자원량을 상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 비율에 따라 가상화된 장치의 수만큼 분할하는 초과자원량분할부;를 포함하고, 상기 제2사용자원량은 상기 파악된 제1사용자원량에서 상기 분할된 초과자원량을 차감한 것을 특징으로 할 수 있다.
상기 장치는, 기저장된 단위자원사용금액 및 상기 제2사용자원량을 기초로 상기 호스트장치에 포함된 각각의 가상화된 장치에 대한 과금액을 결정하는 과금액결정부를 더 포함할 수 있다.
상기 장치는, 상기 제2사용자원량의 기초로 상기 호스트장치에 포함된 가상화된 장치들에 대한 우선순위를 결정하는 장치우선순위결정부; 및 사용자가 입력한 우선순위를 수신하고, 상기 수신된 우선순위에 따라 상기 호스트장치에 포함된 가상화된 장치들 중 적어도 하나 이상의 가상화된 장치에 대한 정보를 출력하는 사용자선택장치출력부;를 더 포함할 수 있다.
본 발명은 상기 기술적 과제를 해결하기 위해 모니터링 데이터 수집 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체를 제공할 수 있다.
본 발명에 따르면, 사용자는 호스트장치에 구현된 가상화된 장치들의 실질적인 자원활용률을 파악하여, 가장 자원활용률이 낮은 가상화된 장치를 현재의 호스트장치로부터 격리시켜서 다른 호스트장치로 이관시키거나, 호스트장치에 구현된 가상화된 장치 전체에 대한 할당자원량을 조정(자원의 재배치)함으로써, 제한된 호스트장치의 자원량이 가상화된 장치들에 의해 효율적으로 사용될 수 있도록 할 수 있다.
도 1은 본 발명에 따른 가상화된 장치의 모니터링 데이터 수집 시스템의 전체구성을 개략적으로 도시한 도면이다.
도 2는 본 발명에 따른 모니터링 데이터 수집 장치의 일 예에 대한 블록도이다.
도 3은 할당자원량, 제1사용자원량 및 제2사용자원량을 도식적으로 나타낸 도면이다.
도 4는 호스트머신에 3개의 가상머신이 구현되었을 때의 각 가상머신의 할당자원량과 제1사용자원량을 도식적으로 나타내는 도면이다.
도 5는 도 4에서 제2사용자원량산출부가 가상머신 1 내지 가상머신 3의 제2사용자원량을 산출한 것을 도식적으로 나타내는 도면이다.
도 6은 본 발명에 따른 모니터링 데이터 수집 방법의 일 예에 대한 흐름도를 도시한 도면이다.
도 7은 제2사용자원량산출부가 제2사용자원량을 산출하는 방법의 일 예에 대한 흐름도를 도시한 도면이다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 실시 예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
이하의 실시 예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다.
이하의 실시 예에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
이하의 실시 예에서, 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징을 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다.
어떤 실시 예가 달리 구현 가능한 경우에 특정한 공정 순서는 설명되는 순서와 다르게 수행될 수도 있다. 예를 들어, 연속하여 설명되는 두 공정이 실질적으로 동시에 수행될 수도 있고, 설명되는 순서와 반대의 순서로 진행될 수 있다.
도 1은 본 발명에 따른 가상화된 장치의 모니터링 데이터 수집 시스템의 전체구성을 개략적으로 도시한 도면이다.
도 1을 참조하면, 본 발명에 따른 가상화된 장치의 모니터링 데이터 수집 시스템(10)은 호스트 장치(100), 가상화된 장치(110, 130, 150) 및 호스트 장치(100), 가상화된 장치(110, 130, 150)와 통신망을 통해 각종 데이터를 주고받는 모니터링 데이터 수집 장치(200)로 구성되어 있다는 것을 알 수 있다.
먼저, 호스트 장치(100)는 사용자에 의해 가상화가 적용되는 물리적인 서버(Server)를 의미한다. 호스트 장치(100)는 유무선 통신망을 통해 그 호스트 장치(100)로 흘러들어오는 각종 정보를, 각 정보의 특성에 맞춰서 처리하고 저장한다. 사용자는 호스트 장치(100)에 가상머신이나 컨테이너 방식으로 가상화(Virtualization)를 적용시킬 수 있으며, 가상화된 장치인 가상머신(Virtual Machine)이나 컨테이너(Container)의 성능은 호스트 장치(100)의 성능을 상한선으로 한다. 예를 들어, 호스트 장치(100)가 옥타코어(Octa-core) CPU를 장착한 서버라면, 그 호스트 장치(100)내에 구현되는 가상머신의 CPU는 옥타코어를 초과할 수 없다.
가상화된 장치(110, 130, 150)는 사용자가 호스트 장치(100)에 가상화를 적용하여 소프트웨어적으로 구현한 장치이다. 도 1을 참조하면, 호스트 장치(100)내에 구현된 가상화된 장치(110, 130, 150)는 3개뿐이지만, 이는 설명의 편의를 위해 가상화된 장치의 수를 3개로 한정한 것뿐이며, 실시 예에 따라, 가상화된 장치의 수는 3개보다 적거나 많을 수도 있다. 호스트 장치(100)에 구현되는 가상화된 장치(110, 130, 150)는 모두 가상머신이나 컨테이너에 의해 구현될 수도 있으며, 호스트 장치(100)에 구현되는 가상화된 장치들은 모두 동일한 가상화 방식에 의해 구현될 필요는 없다. 또한, 호스트 장치(100)에 적용되는 가상화 기술은 전술한 가상머신이나 컨테이너 방식이 아닌 다른 방식일 수도 있다.
각 가상화된 장치(110, 130, 150)의 자원량은 호스트 장치(100)의 최대 자원량을 초과할 수 없지만, 가상화된 장치(110, 130, 150)들에 할당된 자원량의 총합은 호스트 장치(100)의 최대 자원량을 초과할 수도 있다. 이렇게 가상화된 장치(110, 130, 150)에 자원을 초과할당(over-commit)하는 것은 가상화된 장치(110, 130, 150)가 언제나 모든 자원을 이용하여 동작하고 있는 것이 아니므로, 가상화된 장치(110, 130, 150)를 통해 처리되는 작업의 효율성을 증대시키기 위함이며, 가상화된 장치(110, 130, 150)에 할당되고 사용되는 자원량은 호스트 장치(100)의 기본 성능내에서 가상화 기술에 따라 소프트웨어적으로 구현된 것이기 때문에 가상화된 장치(110, 130, 150)에 자원을 초과할당하는 것이 가능하다.
가상화된 장치(110, 130, 150)는 호스트 장치(100)내에 구현되는 장치로서, 호스트 장치(100)와 각종 데이터를 주고 받을 수 있다. 가상화된 장치(110, 130, 150)는 호스트 장치(100)내에 구현되는 논리적인 장치이므로, 호스트 장치(100)는 각각의 가상화된 장치를 식별할 수 있으며, 이미 구현된 가상화된 장치(110, 130, 150) 중 적어도 하나 이상의 가상화된 장치를 호스트 장치(100)로부터 격리시킨 후, 기존의 호스트 장치(100)와 다른 호스트 장치로 이관(Migration)시키는 것도 가능하다.
가상화된 장치(110, 130, 150)는 호스트 장치(100)의 최대 자원 범위 내에서 할당되는 자원량을 기초로 독자적으로 각종 데이터를 처리할 수 있으며, 호스트 장치(100) 또는 다른 가상화된 장치에 발생하는 프로세스에 의해 영향을 받게 된다. 예를 들어, 어느 한 가상화된 장치가 사용자의 입력에 의해 새로운 데이터를 처리하려고 할 때, 그 가상화된 장치를 제외한 나머지 가상화된 장치들이 사용하고 있는 자원량이 호스트 장치(100)의 최대 자원량을 초과하는 경우에는, 그 가상화된 장치의 데이터 처리는 진행되지 않을 수 있다. 이런 상황에서, 호스트 장치(100)는 호스트 장치(100)에 정의된 모든 가상화된 장치가 병렬적으로 데이터를 처리할 수 있도록 조정하는 기능을 포함할 수 있다.
가상화된 장치(110, 130, 150)와 모니터링 데이터 수집 장치(200)간의 통신망(170)은 가상화된 장치(110, 130, 150) 및 모니터링 데이터 수집 장치(200)에 설치되어 있는 프로그램에 따라 순차적으로 데이터가 송수신될 수 있는 각종 유무선 망을 의미한다. 또한, 호스트 장치(100)와 모니터링 데이터 수집 장치(200)간의 통신망(190)은 호스트 장치(100) 및 모니터링 데이터 수집 장치(200)에 설치되어 있는 프로그램에 따라 순차적으로 데이터가 송수신될 수 있는 각종 유무선 망을 의미한다.
모니터링 데이터 수집 장치(200)는 가상화된 장치(110, 130, 150)와 모니터링 데이터 수집 장치(200)간의 통신망(170)을 통해 가상화된 장치(110, 130, 150)로부터 데이터를 수신하고, 그 수신한 데이터에 가공하여 호스트 장치(100)와 모니터링 데이터 수집 장치(200)간의 통신망(190)을 통해 호스트 장치(100)에 송신한다.
모니터링 데이터 수집 장치(200)는 가상화된 장치(110, 130, 150)가 데이터를 처리한 결과 그 자체에 대한 데이터뿐만 아니라, 가상화된 장치(110, 130, 150)가 특정한 목적으로 데이터를 처리하면서 사용하는 자원량에 대한 정보도 수신할 수 있다. 특히, 가상화된 장치(110, 130, 150)에 할당된 자원량의 총합이 호스트 장치(100)의 최대 자원량을 초과하고, 실제로 가상화된 장치(110, 130, 150)들 내부에서 측정된 자원의 사용량이 호스트 장치(100)의 최대 자원량을 초과하게 되는 경우, 모니터링 데이터 수집 장치(200)는 가상화된 장치(110, 130, 150)로부터 자원의 사용량에 대한 정보를 수신하여, 호스트 장치(100)의 최대 자원량에 따라 각 가상화된 장치(110, 130, 150)가 실질적으로 사용한 자원량을 산출하게 된다.
모니터링 데이터 수집 장치(200)가 가상화된 장치(110, 130, 150)들이 사용한 실제 자원량을 산출하는 과정에 대해서는 도 2를 통해 상세히 설명하기로 한다.
도 2는 본 발명에 따른 모니터링 데이터 수집 장치의 일 예에 대한 블록도이다.
도 2를 참조하면, 본 발명에 따른 모니터링 데이터 수집 장치(200)는 할당자원량파악부(210), 자원량초과파악부(220), 제2사용자원량산출부(230), 과금액결정부(240), 단위사용금액데이터베이스(245), 장치우선순위결정부(250), 사용자선택장치출력부(260)를 포함한다는 것을 알 수 있다. 실시 예에 따라, 과금액결정부(240), 단위사용금액데이터베이스(245), 장치우선순위결정부(250), 사용자선택장치출력부(260)는 생략될 수도 있다.
설명의 편의를 위해, 도 2에는 도시되지 않았으나 전술한 도 1에서 이미 설명한 구성 요소에 대해서는 도 1과 동일한 참조부호를 사용하여 설명하기로 한다.
본 발명에 따른 모니터링 데이터 수집 장치(200)는 적어도 하나 이상의 프로세서(processor)에 해당하거나, 적어도 하나 이상의 프로세서를 포함할 수 있다. 이에 따라, 모니터링 데이터 수집 장치(200)는 마이크로 프로세서나 범용 컴퓨터 시스템과 같은 다른 하드웨어 장치에 포함된 형태로 구동될 수 있다. 즉, 사용자가 이용하는 단말에 그대로 탑재되거나, 사용자가 이용하는 단말에 유선 또는 무선으로 연결되어 그 단말의 화면에 표시되는 내용에 영향을 주는 형태로 구현될 수도 있다.
먼저, 할당자원량파악부(210)는 가상화된 장치마다 할당된 자원량을 파악한다. 여기서, 가상화된 장치는 하나의 호스트장치상에 구현되는 장치로서, 그 호스트장치에는 적어도 두 개 이상의 가상화된 장치가 포함되어 있다. 이하에서는, 할당자원량파악부(210)가 파악한 각 가상화된 장치에 할당되는 자원량을 할당자원량이라고 호칭하기로 한다. 호스트장치에 구현되는 가상화된 장치는 가상머신 또는 컨테이너 방식에 의해 구현될 수 있으며, 가상머신이나 컨테이너 방식이 아닌 다른 가상화 방식에 의해 구현될 수도 있다.
할당자원량파악부(210)는 각종 통신망을 통해서 가상화된 장치로부터 가상화된 장치의 식별코드 및 가상화된 장치의 할당자원량에 대한 정보를 수신하고 저장한다. 이 과정에서 할당자원량파악부(210)는 호스트장치와 통신하여, 호스트장치로부터 호스트장치의 최대 자원량에 대한 정보를 수신할 수 있다.
이어서, 자원량초과파악부(220)는 각 가상화된 장치들이 할당자원량 내에서 사용한 자원량의 총합이 호스트장치의 최대 자원량을 초과하는지 여부를 파악한다. 자원량초과파악부(220)는 할당자원량파악부(210)로부터 수신한 정보를 기초로, 각 가상화된 장치들의 할당자원량을 파악할 수 있으며, 각각의 가상화된 장치들은 최초에 할당된 자원량을 상한으로 하여 데이터를 처리할 수 밖에 없으므로, 각 가상화된 장치들이 사용하는 자원량은 각 가상화된 장치들마다 할당된 할당자원량을 초과하지는 않는다.
다만, 전술한 것과 같이 호스트장치 내에 구현되는 가상화된 장치들의 데이터 처리의 효율성을 위해서, 각 가상화된 장치들의 할당자원량의 총합은 호스트장치의 최대 자원량을 초과할 수도 있고, 그에 따라 각 가상화된 장치들이 사용하는 자원량의 총합도 호스트장치의 최대 자원량을 초과하는 경우도 발생할 수 있다. 이런 상황에서 계측되는 각 가상화된 장치들의 자원의 사용량은, 각 가상화된 장치들의 내부에서 측정된 값으로서, 호스트장치의 자원량의 최대값이 한정되어 있는 이상, 가상화된 장치의 자원의 실제 사용량은 각 가상화된 장치들의 내부에서 측정된 값보다 낮은 값이 되어야 한다.
본 발명에 따른 모니터링 데이터 수집 장치(200)는 위와 같이 호스트장치에 복수의 가상화된 장치를 포함시키고, 각 가상화된 장치에 자원을 초과할당할 시에, 최초의 할당자원량에 의해 각 가상화된 장치가 실질적인 자원활용량을 반영하지 않는 데이터를 출력하는 현상을 막기 위해 고안된 것이다. 이하에서는, 가상화된 장치들이 할당자원량 내에서 사용한 자원량으로서, 그 가상화된 장치내에서 측정된 값을 제1사용자원량이라고 호칭하기로 한다.
자원량초과파악부(220)는 이미 파악된 할당자원량 외에 가상화된 장치들로부터 각 가상화된 장치의 제1사용자원량에 대한 정보를 수신하고, 호스트장치에 구현된 가상화된 장치들의 제1사용자원량의 총합을 산출한다. 자원량초과파악부(220)는 제1사용자원량의 총합을 호스트장치의 최대 자원량과 비교하여, 제1사용자원량의 총합이 호스트장치의 최대 자원량을 초과하는지 여부를 파악하고, 그 파악한 결과를 제2사용자원량산출부(230)에 전달한다.
제2사용자원량산출부(230)는 제1사용자원량의 총합이 호스트장치의 최대 자원량을 초과하면, 할당자원량파악부(210)에서 파악한 각 가상화된 장치의 할당자원량을 기초로 각 가상화된 장치가 호스트장치의 최대 자원량 내에서 사용한 자원량을 산출한다. 이하에서는, 각 가상화된 장치가 호스트장치의 최대 자원량 내에서 사용한 자원량은 제2사용자원량으로 호칭하기로 한다.
제2사용자원량산출부(230)는 제1사용자원량의 총합이 호스트장치의 최대 자원량을 초과하지 않는다고 판단하면, 제2사용자원량을 산출하지 않는다. 제1사용자원량의 총합이 호스트장치의 최대 자원량을 초과하지 않는다면, 각 가상화된 장치들의 제1사용자원량의 총합의 비율만으로, 가상화된 장치들의 실질적인 자원활용률을 가늠할 수 있기 때문이다. 예를 들어, 100GB 메모리가 호스트장치의 최대 메모리 값이고, 3개의 가상화된 장치가 각각 50GB, 20GB, 10GB만큼의 메모리를 사용하였다면, 호스트장치의 최대 자원량보다 가상화된 장치들의 제1사용자원량의 총합이 적게 되어, 가상화된 장치를 관리하는 관리자는 가상화된 장치들의 자원활용률은 5:2:1이라고 판단할 수 있다.
제2사용자원량산출부(230)는 제1사용자원량의 총합이 호스트장치의 최대 자원량을 초과하면, 실제로 가상화된 장치들이 호스트장치의 최대 자원량을 초과하여 사용하면서 데이터를 처리할 수 없으므로, 각 가상화된 장치가 호스트장치의 최대 자원량 내에서 사용한 자원량인 제2사용자원량을 산출한다. 제2사용자원량은 각 가상화된 장치내에서 측정된 자원의 사용량을 단순히 합산한 제1사용자원량과 구별되며, 각 가상화된 장치의 제2사용자원량의 총합은 호스트장치의 최대 자원량을 초과하지 않는다.
제2사용자원량산출부(230)는 각 가상화된 장치들의 할당자원량 및 제1사용자원량의 총합에서 호스트장치의 최대 자원량을 차감한 자원량 중 적어도 하나 이상의 지표를 기준으로, 각 가상화된 장치의 제2사용자원량을 산출할 수 있다. 이하에서는, 제1사용자원량의 총합에서 호스트장치의 최대 자원량을 차감한 자원량을 초과자원량이라고 호칭하기로 한다. 제2사용자원량산출부(230)가 산출하는 제2사용자원량은 각 가상화된 장치의 할당자원량 및 초과자원량을 고려하여 산출되므로, 사용자는 각 가상화된 장치의 제2사용자원량을 기초로 호스트장치에 구현된 가상화된 장치들의 실질적인 자원활용률을 파악할 수 있게 된다.
선택적 일 실시 예로서, 제2사용자원량산출부(230)는 초과자원량산출부(231), 초과자원량분할부(233) 및 초과자원량차감부(235)를 포함할 수도 있다.
초과자원량산출부(231)는 제1사용자원량의 총합에서 호스트장치의 최대 자원량을 차감하여 초과자원량을 산출한다. 이어서, 초과자원량분할부(233)는 초과자원량산출부(231)가 산출한 초과자원량을 호스트장치에 구현된 가상화된 장치들의 할당자원량의 비율에 따라 가상화된 장치의 수만큼 분할한다.
여기서, 가상화된 장치들의 할당자원량의 비율의 일 예로서, 각 가상화된 장치의 할당자원량을 가장 간단한 정수의 비로 나타낸 것이 가상화된 장치들의 할당자원량의 비율이 될 수 있다. 예를 들어, 호스트장치의 최대 메모리 용량은 100GB이고, 호스트장치에 구현된 3개의 가상화된 장치의 메모리 용량은 각각 60GB, 30GB, 15GB라면, 가상화된 장치의 할당자원량의 비율은 4:2:1이 된다.
초과자원량분할부(233)는 초과자원량을 호스트장치에 구현된 가상화된 장치들의 할당자원량의 비율에 따라 가상화된 장치의 수만큼 분할하게 되므로, 그 분할된 초과자원량도 전술한 할당자원량이나 제1사용자원량과 같이 각 가상화된 장치마다 대응되는 값이 된다. 이하, 위 과정을 통해 초과자원량분할부(233)에 의해 분할되는 초과자원량은 분할초과자원량으로 호칭하기로 한다.
예를 들어, 초과자원량이 24GB이고, 가상화된 장치의 할당자원량이 각각 30GB, 15GB라면, 할당자원량의 비율이 2:1이므로, 두 가상화된 장치의 분할초과자원량은 각각 16GB, 8GB가 된다.
초과자원량차감부(235)는 자원량초과파악부(220)에서 파악된 가상화된 장치의 제1사용자원량에서 분할초과자원량을 차감하여 제2사용자원량을 산출한다. 여기서, 제1사용자원량 및 분할초과자원량이 각 가상화된 장치에 대응하는 값이므로, 초과자원량차감부(235)에 의해 산출되는 제2사용자원량도 각 가상화된 장치에 대응하는 값으로서, 가상화된 장치의 수에 따른다.
예를 들어, 두 가상화된 장치의 제1사용자원량이 각각 30GB, 25GB이고, 두 가상화된 장치의 분할초과자원량이 각각 10GB, 4GB라면, 두 가상화된 장치의 제2사용자원량은 각각 20GB, 21GB가 된다. 위와 같은 예를 참조하면, 제2사용자원량은 호스트장치의 최대 자원량 내에서 사용한 자원활용률을 나타내기 위한 척도이므로, 각 가상화된 장치내에서 측정된 자원사용량(제1사용자원량)이 더 큰 가상화된 장치이더라도 더 낮은 제1사용자원량을 갖는 가상화된 장치보다 더 낮은 자원활용률을 보일 수 있다는 점을 알 수 있다.
초과자원량차감부(235)는 실시 예에 따라 생략될 수도 있고, 이 경우, 제2사용자원량산출부(230)는 초과자원량산출부(231)와 초과자원량분할부(233)로부터 산출된 정보를 기초로 제2사용자원량을 산출하게 된다. 전술한 제2사용자원량 산출과정은 제2사용자원량을 산출하기 위한 일 예이므로, 할당자원량과 초과자원량을 기초로 하여 다른 방식으로 제2사용자원량을 산출하더라도 본 발명의 범주를 벗어나는 것은 아니다.
과금액결정부(240)는 기저장된 단위자원사용금액 및 제2사용자원량을 기초로 호스트장치에 구현된 각각의 가상화된 장치에 대한 과금액을 결정한다. 보다 구체적으로는, 과금액결정부(240)는 각각의 가상화된 장치가 데이터를 처리하기 위해 사용한 자원의 사용량에 따라 그 자원의 사용료를 산출하여 사용자에게 출력하기 위한 구성으로서, 과금액결정부(240)는 과금액을 산출하기 위해서 단위자원사용금액을 미리 저장하고 있거나, 단위사용금액데이터베이스(245)로부터 단위자원사용금액에 대한 데이터를 수신할 수 있다.
여기서, 단위자원사용금액이란, 자원의 사용량별로 청구해야하는 금액을 매칭시켜놓은 데이터를 의미하고, 일반적으로 단위자원사용금액과 제2사용자원량을 곱한 결과가 가상화된 장치를 사용한 사용자에게 청구할 금액이 된다.
가상화된 장치가 가장 널리 사용되는 영역 중 하나가 클라우드 서비스(Cloud Service)이며, 클라우드 서비스를 운영하는 운영진은 사용자가 실제로 사용한 만큼만 합리적으로 비용을 청구해야 하는데, 과금액결정부(240)는 제2사용자원량산출부(230)가 산출한 제2사용자원량을 기초로 각 가상화된 장치의 실질적인 자원사용량을 정확하게 파악하여 그에 따른 자원사용량을 사용자에게 청구할 수 있도록 한다.
장치우선순위결정부(250)는 제2사용자원량을 기초로 호스트장치에 포함된 가상화된 장치들에 대한 우선순위를 결정한다. 일 예로서, 장치우선순위결정부(250)는 제2사용자원량이 가장 높은 가상화된 장치에 가장 높은 우선순위를 매길 수 있으며, 다른 예로서, 장치우선순위결정부(250)는 제2사용자원량이 가장 낮은 가상화된 장치에 가장 높은 우선순위를 매길 수도 있다. 각 가상화된 장치마다 매겨진 우선순위는 후술하는 사용자선택장치출력부(260)에 따라 특정한 가상화된 장치를 출력하기 위한 기준이 된다.
사용자선택장치출력부(260)는 사용자로부터 우선순위에 대한 정보를 수신하고, 그 우선순위에 따라 호스트장치에 포함된 가상화된 장치들 중 적어도 하나 이상의 가상화된 장치에 대한 정보를 출력할 수 있다. 우선순위에 대한 정보는 사용자가 원하는 가상화된 장치를 검색하기 위해 필요한 정보이다. 예를 들어, 호스트장치에 구현된 가상화된 장치 중 제2사용자원량이 가장 낮은 가상화된 장치 또는 호스트장치에 구현된 가상화된 장치 중 제2사용자원량이 높은 순서로 첫번째, 두번째인 가상화된 장치가 사용자로부터 수신하는 가상화된 장치의 우선순위에 대한 정보가 될 수 있다.
사용자선택장치출력부(260)는 호스트장치에 구현된 가상화된 장치를 정확하게 검색하기 위해서, 사용자가 우선순위에 대한 정보를 제대로 입력하도록 안내하는 화면을 출력하도록 제어할 수도 있다. 그에 따라, 사용자가 우선순위에 대한 정보를 입력하면, 사용자선택장치출력부(260)는 사용자가 입력한 정보에 부합하는 가상화된 장치들의 식별코드 등을 출력할 수 있다.
장치우선순위결정부(250) 및 사용자선택장치출력부(260)는 제2사용자원량에 따라 호스트장치에 구현된 가상화된 장치에 대한 정보를 사용자에게 선택적으로 제공하며, 사용자는 호스트장치 내에서 동작하는 다수의 가상화된 장치의 실질적인 자원활용량을 파악할 수 있게 되어, 가상화된 장치의 자원활용 분포에 대한 의사결정을 하는 데에 도움을 받게 된다.
예를 들어, 사용자는 가장 자원활용률이 낮은 가상화된 장치를 현재의 호스트장치로부터 격리시켜서 다른 호스트장치로 이관시키거나, 호스트장치에 구현된 가상화된 장치 전체에 대한 할당자원량을 조정(자원의 재배치)함으로써, 제한된 호스트장치의 자원량이 효율적으로 사용될 수 있도록 할 수 있다.
종래에는 가상화된 장치의 할당자원량이나 제1사용자원량만으로, 호스트장치에 구현된 가상화된 장치의 자원의 재배치를 할 수 밖에 없었고, 이는 각 가상화된 장치들의 실질적인 자원활용률을 완전하게 반영할 수 없어서 물리적인 자원의 활용률을 높이는 데에 한계가 있었으나, 본 발명에 따르면 각 가상화된 장치들의 실질적인 자원활용률을 반영하여 각 가상화된 장치들에 우선순위가 매겨짐에 따라, 사용자는 사용자가 원하는 조건의 가상화된 장치를 선택하거나, 호스트장치에 구현된 가상화된 장치들의 자원의 재배치를 결정하기 위한 정보를 획득할 수 있다.
선택적 일 실시 예로서, 호스트장치의 자원 중 Disk(스토리지)가 두 개 이상의 가상화된 장치에 중복으로 할당된 후, 가상화된 장치들의 제1사용자원량의 총합이 호스트장치의 최대 자원량을 초과하면, 사용자선택장치출력부(260)는 제2사용자원량이 가장 높아서 우선순위가 가장 높게 결정된 가상화된 장치에만 자원(Disk)을 맵핑(mapping)하고, 그 우선순위가 가장 높게 결정된 가상화된 장치에 대한 정보를 출력할 수 있다. 이 때, 사용자선택장치출력부(260)는 그 우선순위가 가장 높은 가상화된 장치를 제외한 나머지 가상화된 장치에 대해서는 그 자원에 대한 맵핑을 해제하는 방식으로 한정된 호스트장치의 자원(Disk)의 중복 할당 문제를 해결하며, 미리 설정된 값에 따라 호스트장치의 최대 자원량을 증설하라는 메시지를 출력하여, 추후에 나머지 가상화된 장치에 대한 자원량 확보가 되도록 유도할 수도 있다.
특히, 가상화된 장치의 Disk를 호스트장치의 특정 폴더로 맵핑해서 마운팅한 경우, 그 특정 폴더의 용량이 중복으로 계산되어 가상화된 장치가 실제로 사용하고 용량보다 사용된 것으로 표기되는 용량이 더 클 수 있는데, 본 선택적 실시 예에 따르면, 그 문제를 해결함으로써, 사용자가 호스트장치의 Disk가 부족하지 않음에도 불구하고, 호스트장치의 Disk가 부족하다고 판단하는 일을 방지한다.
도 3은 할당자원량, 제1사용자원량 및 제2사용자원량을 도식적으로 나타낸 도면이다.
도 3을 참조하면, 가상화 방식은 가상머신과 컨테이너 방식 중 가상머신 방식이 적용되어, 호스트머신과 가상머신이 있으며, 호스트머신 내에서 동작하는 가상머신은 2개라는 것을 알 수 있다.
먼저, 도 3에서, 호스트머신의 최대 자원량은 100이고, 가상머신 1의 할당자원량은 80이며, 가상머신 2의 할당자원량은 40이다. 여기서, 자원은 CPU, Memory, Disk(Storage) 등과 같이 다양한 값이 될 수 있으며, 설명의 편의를 위해서 단위를 생략하기로 한다.
도 3에서, 가상머신 1내에서 측정된 자원의 사용량(제1사용자원량)은 75이고, 가상머신 2내에서 측정된 자원의 사용량(제1사용자원량)은 35이다. 즉, 두 가상머신의 할당자원량의 총합은 120이고, 제1사용자원량의 총합은 110이므로, 두 값 모두 호스트머신의 최대 자원량을 초과한다.
도 2를 참조하여 설명하면, 제2사용자원량산출부(230)는 두 가상머신의 제1사용자원량의 총합이 호스트머신의 최대 자원량을 초과하면, 할당자원량을 기초로 제2사용자원량을 산출한다. 선택적 실시 예에 따라, 제2사용자원량산출부(230)는 할당자원량 외에 제1사용자원량을 기초로 제2사용자원량을 산출할 수도 있다.
여기서, 제2사용자원량산출부(230)에 의해 산출되는 제2사용자원량은 한정되어 있는 호스트머신의 최대 자원량 내에서 가상머신 1 또는 가상머신 2가 사용한 실질적인 자원량을 나타내며, 가상머신 1과 가상머신 2의 제2사용자원량의 총합은 호스트머신의 최대 자원량을 초과하지 않게 된다.
Figure 112016052877921-pat00001
수학식 1은 제2사용자원량산출부(230)가 각 가상머신에 대한 제2사용자원량을 산출하기 위해 이용하는 식의 일 예이다. 수학식 1에서 MEASURED_T[v]는 v번째로 할당된 가상머신의 제2사용자원량, MEASURED[v]는 v번째로 할당된 가상머신의 제1사용자원량, max(host)는 호스트머신의 최대 자원량, ALLOCATED[v]는 v번째로 할당된 가상머신의 할당자원량을 각각 의미한다.
위와 같은 정의에 따르면, 모든 가상머신의 제1사용자원량의 총합에서 호스트머신의 최대 자원량을 차감하면 초과자원량이 되므로, 결국, 수학식 1은 초과자원량에 각 가상머신의 할당자원량에 대한 전체 가상머신의 할당자원량의 비율을 곱한 값을 각 가상머신의 제1사용자원량에서 차감하여 제2사용자원량을 산출하는 것을 의미한다는 것을 알 수 있다.
수학식 1에 따르면, 도 3의 가상머신 1과 가상머신 2의 제2사용자원량의 비는 68.33:31.67이 되며, 기존의 제1사용자원량의 비율인 75:35와 비교하면, 자원의 사용량의 비율이 달라졌을 뿐만 아니라, 제2사용자원량을 산출할 때에 할당자원량 및 제1사용자원량의 값을 기초로 함에 따라, 가상머신 1과 가상머신 2의 실질적인 자원의 사용량의 총합이 호스트머신의 최대 자원량인 100을 초과하지 않게 된다.
도 4는 호스트머신에 3개의 가상머신이 구현되었을 때의 각 가상머신의 할당자원량과 제1사용자원량을 도식적으로 나타내는 도면이다.
도 4를 참조하면, 가상머신 1 내지 가상머신 3의 호스트머신으로부터의 할당자원량은 각각 80, 60, 40이며, 가상머신 1 내지 가상머신 3 내에서 각각 측정된 제1사용자원량은 61, 29, 28이라는 것을 알 수 있다.
도 4에서, 가상머신 1 내지 가상머신 3의 할당자원량 및 제1사용량의 총합은 각각 180, 118로서, 두 값 모두 호스트머신의 최대 자원량인 100을 초과하므로, 제2사용자원량산출부는 각 가상머신에 대한 제2사용자원량(실제 호스트머신 기준의 자원사용량)을 산출하게 된다.
도 5는 도 4에서 제2사용자원량산출부가 가상머신 1 내지 가상머신 3의 제2사용자원량을 산출한 것을 도식적으로 나타내는 도면이다.
도 5를 참조하면, 가상머신 1 내지 가상머신 3의 제2사용자원량은 각각 53, 23, 24라는 것을 알 수 있다. 도 5를 도 4와 비교하면, 사용자는 가상머신 2의 제1사용자원량은 가상머신 1의 제1사용자원량에 이어서 두번째로 높았으나, 가상머신 2의 제2사용자원량은 세 개의 가상머신의 제2사용자원량 중 가장 낮은 것을 알 수 있다. 이 결과는, 가상머신 2가 호스트머신으로부터 할당받은 자원량에 비해 실제로 사용한 자원량이 높지 않았던 것에 기인한다.
도 2를 참조하면, 장치우선순위결정부(250)는 도 5에서의 가상머신 2를 가장 자원활용률이 낮은 가상머신으로서 가장 낮은 우선순위를 부여하게 되며, 그에 따라 사용자가 가장 자원활용률이 낮은 가상머신을 검색하면, 사용자선택장치출력부(260)는 가상머신 2에 대한 정보를 사용자에게 출력할 수 있다.
이와 같이, 가상화된 장치내에서 측정된 사용량이 아니라, 실제 호스트머신의 최대 자원량을 기준으로 한 자원사용량에 따라 가상화된 장치를 구분할 수 있게 됨으로써, 사용자는 본 발명을 활용하여 자원활용률이 낮은 가상화된 장치를 감지하고, 가상화된 장치의 자원의 재배치 등과 같은 관리 작업을 용이하게 수행할 수 있게 된다.
도 6은 본 발명에 따른 모니터링 데이터 수집 방법의 일 예에 대한 흐름도를 도시한 도면이다.
도 6에 따른 모니터링 데이터 수집 방법은 도 2에서 설명한 모니터링 데이터 수집 장치에 의해 구현될 수 있으며, 도 2에서 설명한 것과 중복된 설명은 생략하기로 한다.
먼저, 할당자원량파악부는 가상화된 장치마다 할당된 할당자원량을 파악한다(S610). 이 때, 가상화된 장치는 가상머신 또는 컨테이너 방식에 의해 구현된 장치일 수 있으며, 하나의 호스트장치에 구현되는 가상화된 장치는 적어도 두 개 이상이라는 것은 이미 설명한 바 있다.
이어서, 자원량초과파악부는 각 가상화된 장치의 할당자원량 내에서 사용한 제1사용자원량의 총합을 산출한다(S630). 자원량초과파악부는 단계 S630에서 산출된 가상화된 장치의 제1사용자원량의 총합이 호스트장치의 최대 자원량보다 큰지 여부를 파악한다(S650).
제2사용자원량산출부는 단계 S630에서 산출된 가상화된 장치의 제1사용자원량의 총합이 호스트장치의 최대 자원량보다 크다면, 할당자원량을 기초로 각 가상화된 장치가 호스트장치의 최대 자원량 내에서 사용한 제2사용자원량을 산출한다(S670).
단계 S670의 선택적 일 실시 예로서, 과금액결정부는 제2사용자원량산출부가 산출한 각 가상화된 장치의 제2사용자원량 및 기저장된 단위자원사용금액을 기초로 각 가상화된 장치에서 사용된 자원량에 대한 과금액을 결정할 수도 있다.
다른 선택적 일 실시 예로서, 장치우선순위결정부는 제2사용자원량산출부가 산출한 각 가상화된 장치의 제2사용자원량을 기초로 각 가상화된 장치들의 우선순위를 결정할 수 있으며, 사용자선택장치출력부는 사용자가 입력한 우선순위에 부합하는 가상화된 장치에 대한 정보를 출력할 수도 있다.
도 7은 제2사용자원량산출부가 제2사용자원량을 산출하는 방법의 일 예에 대한 흐름도를 도시한 도면이다.
도 7을 참조하면, 도 7에 도시된 흐름도는 도 6의 단계 S650부터 시작하므로, 제2사용자원량산출부는 각 가상화된 장치에 대한 할당자원량 및 제1사용자원량에 대한 정보를 이미 포함한다는 것을 알 수 있다.
초과자원량산출부는 제1사용자원량의 총합에서 호스트장치의 최대 자원량을 차감하여, 초과자원량을 산출한다(S651). 초과자원량분할부는 초과자원량을 각 가상화된 장치들의 할당자원량의 비율에 따라 분할한다(S653). 초과자원량의 산출 및 분할에 대해서는 도 3 내지 도 5와 수학식 1을 통해 이미 설명한 바 있다.
초과자원량차감부는 각 가상화된 장치들의 제1사용자원량에서 분할된 초과자원량을 차감하여 각 가상화된 장치별 제2사용자원량을 산출한다(S655). 단계 S655를 거쳐서 산출된 각 가상화된 장치의 제2사용자원량은 실제 호스트장치의 최대 자원량에 대한 정보를 반영하고 있게 되어, 사용자에게 각 가상화된 장치의 실질적인 자원활용률을 알려줌과 동시에, 사용자가 특정 가상화된 장치를 이관시키거나, 호스트장치에 구현된 가상화된 장치에 대한 자원을 재배치하는 결정을 내리는 데에 도움을 줄 수 있다.
이상 설명된 본 발명에 따른 실시 예는 컴퓨터 상에서 다양한 구성요소를 통하여 실행될 수 있는 컴퓨터 프로그램의 형태로 구현될 수 있으며, 이와 같은 컴퓨터 프로그램은 컴퓨터로 판독 가능한 매체에 기록될 수 있다. 이때, 매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치를 포함할 수 있다.
한편, 상기 컴퓨터 프로그램은 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 프로그램의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함될 수 있다.
본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, "필수적인", "중요하게" 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.
본 발명의 명세서(특히 특허청구범위에서)에서 "상기"의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예를 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.
200 : 모니터링 수집 장치
210 : 할당자원량파악부
220 : 자원량초과파악부
230 : 제2사용자원량산출부
240 : 과금액결정부
245 : 단위사용금액데이터베이스
250 : 장치우선순위결정부
260 : 사용자선택장치출력부

Claims (15)

  1. 하나의 호스트장치상에 적어도 두 개 이상의 가상화된 장치를 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법으로서,
    상기 가상화된 장치마다 할당된 할당자원량을 파악하는 할당자원량파악단계;
    상기 가상화된 장치들이 상기 할당자원량 내에서 사용한 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하는지 여부를 파악하는 자원량초과파악단계; 및
    상기 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하면, 상기 파악된 할당자원량을 기초로 상기 가상화된 장치들이 상기 호스트장치의 최대 자원량 내에서 사용한 제2사용자원량을 산출하는 제2사용자원량산출단계;를 포함하고,
    상기 제2사용자원량산출단계는,
    상기 제1사용자원량의 총합에서 상기 호스트장치의 최대 자원량을 차감하여 초과자원량을 산출하는 초과자원량산출단계; 및
    상기 산출된 초과자원량을 상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 비율에 따라 가상화된 장치의 수만큼 분할하는 초과자원량분할단계;를 포함하고,
    상기 제2사용자원량은 상기 파악된 제1사용자원량에서 상기 분할된 초과자원량을 차감한 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법.
  2. 제1항에 있어서,
    상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 총합은 상기 호스트장치의 최대 자원량을 초과하는 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법.
  3. 제1항에 있어서,
    상기 호스트장치에 포함된 가상화된 장치는 적어도 하나 이상의 가상머신(Virtual Machine)과 적어도 하나 이상의 컨테이너(Container)인 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법.
  4. 제1항에 있어서,
    상기 제2사용자원량산출단계는,
    상기 가상화된 장치들의 제2사용자원량의 총합이 상기 호스트장치의 최대 자원량과 일치하도록, 상기 제2사용자원량을 산출하는 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법.
  5. 삭제
  6. 제1항에 있어서, 상기 방법은
    기저장된 단위자원사용금액 및 상기 제2사용자원량을 기초로 상기 호스트장치에 포함된 각각의 가상화된 장치에 대한 과금액을 결정하는 과금액결정단계를 더 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법.
  7. 제1항에 있어서, 상기 방법은,
    상기 제2사용자원량의 기초로 상기 호스트장치에 포함된 가상화된 장치들에 대한 우선순위를 결정하는 장치우선순위결정단계; 및
    사용자가 입력한 우선순위를 수신하고, 상기 수신된 우선순위에 따라 상기 호스트장치에 포함된 가상화된 장치들 중 적어도 하나 이상의 가상화된 장치에 대한 정보를 출력하는 사용자선택장치출력단계;를 더 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 방법.
  8. 제1항 내지 제4항, 제6항 및 제7항 중 어느 한 항에 따른 방법을 실행시키기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체.
  9. 하나의 호스트장치상에 적어도 두 개 이상의 가상화된 장치를 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치로서,
    상기 가상화된 장치마다 할당된 할당자원량을 파악하는 할당자원량파악부;
    상기 가상화된 장치들이 상기 할당자원량 내에서 사용한 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하는지 여부를 파악하는 자원량초과파악부; 및
    상기 제1사용자원량의 총합이 상기 호스트장치의 최대 자원량을 초과하면, 상기 파악된 할당자원량을 기초로 상기 가상화된 장치들이 상기 호스트장치의 최대 자원량 내에서 사용한 제2사용자원량을 산출하는 제2사용자원량산출부;를 포함하고,
    상기 제2사용자원량산출부는,
    상기 제1사용자원량의 총합에서 상기 호스트장치의 최대 자원량을 차감하여 초과자원량을 산출하는 초과자원량산출부; 및
    상기 산출된 초과자원량을 상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 비율에 따라 가상화된 장치의 수만큼 분할하는 초과자원량분할부;를 포함하고,
    상기 제2사용자원량은 상기 파악된 제1사용자원량에서 상기 분할된 초과자원량을 차감한 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치.
  10. 제9항에 있어서,
    상기 호스트장치에 포함된 가상화된 장치들의 할당자원량의 총합은 상기 호스트장치의 최대 자원량을 초과하는 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치.
  11. 제9항에 있어서,
    상기 호스트장치에 포함된 가상화된 장치는 적어도 하나 이상의 가상머신(Virtual Machine)과 적어도 하나 이상의 컨테이너(Container)인 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치.
  12. 제9항에 있어서,
    상기 제2사용자원량산출부는,
    상기 가상화된 장치들의 제2사용자원량의 총합이 상기 호스트장치의 최대 자원량과 일치하도록, 상기 제2사용자원량을 산출하는 것을 특징으로 하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치.
  13. 삭제
  14. 제9항에 있어서, 상기 장치는,
    기저장된 단위자원사용금액 및 상기 제2사용자원량을 기초로 상기 호스트장치에 포함된 각각의 가상화된 장치에 대한 과금액을 결정하는 과금액결정부를 더 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치.
  15. 제9항에 있어서, 상기 장치는,
    상기 제2사용자원량의 기초로 상기 호스트장치에 포함된 가상화된 장치들에 대한 우선순위를 결정하는 장치우선순위결정부; 및
    사용자가 입력한 우선순위를 수신하고, 상기 수신된 우선순위에 따라 상기 호스트장치에 포함된 가상화된 장치들 중 적어도 하나 이상의 가상화된 장치에 대한 정보를 출력하는 사용자선택장치출력부;를 더 포함하는 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치.
KR1020160068108A 2016-06-01 2016-06-01 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체 KR101691578B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160068108A KR101691578B1 (ko) 2016-06-01 2016-06-01 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160068108A KR101691578B1 (ko) 2016-06-01 2016-06-01 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체

Publications (1)

Publication Number Publication Date
KR101691578B1 true KR101691578B1 (ko) 2016-12-30

Family

ID=57737382

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160068108A KR101691578B1 (ko) 2016-06-01 2016-06-01 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체

Country Status (1)

Country Link
KR (1) KR101691578B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102187382B1 (ko) * 2020-07-31 2020-12-07 나무기술 주식회사 클라우드 인프라 기반의 컨테이너 가상os 통합 모니터링 운영 방법
KR102532319B1 (ko) * 2022-11-24 2023-05-17 주식회사 글로벌에이치알코리아 블록체인을 이용한 클라우드 가상머신 기반 다중 채널 노드 운용 방법 및 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120072059A (ko) * 2010-12-23 2012-07-03 한국전자통신연구원 가상화 네트워크에서 자원 제어 방법
KR20130075377A (ko) * 2011-12-27 2013-07-05 서강대학교산학협력단 가상화 환경에서 프로세서를 할당하는 장치 및 방법
US20140359356A1 (en) * 2012-03-30 2014-12-04 Fujitsu Limited Information processing apparatus and method for shutting down virtual machines
KR20150126463A (ko) 2014-05-02 2015-11-12 한국인터넷진흥원 가상머신 논리적 그룹에 기반한 정책 관리 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120072059A (ko) * 2010-12-23 2012-07-03 한국전자통신연구원 가상화 네트워크에서 자원 제어 방법
KR20130075377A (ko) * 2011-12-27 2013-07-05 서강대학교산학협력단 가상화 환경에서 프로세서를 할당하는 장치 및 방법
US20140359356A1 (en) * 2012-03-30 2014-12-04 Fujitsu Limited Information processing apparatus and method for shutting down virtual machines
KR20150126463A (ko) 2014-05-02 2015-11-12 한국인터넷진흥원 가상머신 논리적 그룹에 기반한 정책 관리 시스템 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102187382B1 (ko) * 2020-07-31 2020-12-07 나무기술 주식회사 클라우드 인프라 기반의 컨테이너 가상os 통합 모니터링 운영 방법
KR102532319B1 (ko) * 2022-11-24 2023-05-17 주식회사 글로벌에이치알코리아 블록체인을 이용한 클라우드 가상머신 기반 다중 채널 노드 운용 방법 및 시스템

Similar Documents

Publication Publication Date Title
US11714667B2 (en) Automated scaling of application in virtual data centers
US10969967B2 (en) Allocation and balancing of storage resources based on anticipated workload levels
US11403220B2 (en) Method and apparatus for adaptive cache load balancing for SSD-based cloud computing storage system
US9304824B1 (en) Method and apparatus for providing isolated virtual space
CN106453457B (zh) 云计算平台内的多优先级服务实例分配
US9569244B2 (en) Implementing dynamic adjustment of I/O bandwidth for virtual machines using a single root I/O virtualization (SRIOV) adapter
US11924117B2 (en) Automated local scaling of compute instances
US20150261575A1 (en) Workload Management With Resource Transfer Sequence Planned As A Function Of Ranking Of Resource Allocations
WO2014198001A1 (en) System and method for determining capacity in computer environments using demand profiles
TW201407476A (zh) 虛擬機資源配置系統及方法
US10616134B1 (en) Prioritizing resource hosts for resource placement
CN111399970A (zh) 一种预留资源管理方法、装置和存储介质
EP3859524A1 (en) Serverless function colocation with storage pools
KR101691578B1 (ko) 가상화 환경에서의 가상화된 장치들에 대한 모니터링 데이터 수집 장치, 방법 및 그 방법을 실행하기 위한 프로그램을 기록하고 있는 컴퓨터 판독가능한 기록매체
US10990519B2 (en) Multi-tenant cloud elastic garbage collector
JP5867499B2 (ja) 仮想サーバシステム、管理サーバ装置及びシステム管理方法
WO2019072171A1 (zh) 环形组网下的网络功能虚拟化业务链映射的方法及装置
KR20120085433A (ko) 가상 서버 할당 시스템 및 방법
CN112905311A (zh) 一种计算实例的调度方法及其装置

Legal Events

Date Code Title Description
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191224

Year of fee payment: 4