KR102385706B1 - 가상 네트워크 장치의 적합성 검증 장치 및 평가 방법 - Google Patents

가상 네트워크 장치의 적합성 검증 장치 및 평가 방법 Download PDF

Info

Publication number
KR102385706B1
KR102385706B1 KR1020160057735A KR20160057735A KR102385706B1 KR 102385706 B1 KR102385706 B1 KR 102385706B1 KR 1020160057735 A KR1020160057735 A KR 1020160057735A KR 20160057735 A KR20160057735 A KR 20160057735A KR 102385706 B1 KR102385706 B1 KR 102385706B1
Authority
KR
South Korea
Prior art keywords
test
virtual network
network device
items
virtual
Prior art date
Application number
KR1020160057735A
Other languages
English (en)
Other versions
KR20170127288A (ko
Inventor
나태흠
윤성현
류호용
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020160057735A priority Critical patent/KR102385706B1/ko
Publication of KR20170127288A publication Critical patent/KR20170127288A/ko
Application granted granted Critical
Publication of KR102385706B1 publication Critical patent/KR102385706B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/50—Testing arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

본 발명에 따른 가상 네트워크 장치의 적합성 검증 장치는 하나 이상의 가상 네트워크 장치(Virtual Network Function) 및 가상 네트워크 장치 명세서(Virtual Network Function Description)를 수신하는 네트워크 기능 수신부, 가상 네트워크 장치 명세서에 기초하여 시험항목을 추출하고, 추출된 시험항목에 대한 세부적인 체크리스트를 지정하여 시험경로를 설정하는 시험경로 결정부 및 결정된 시험경로에 기초하여 하나 이상의 가상 네트워크 장치의 성능을 시험하는 네트워크 시험 수행부를 포함한다.

Description

가상 네트워크 장치의 적합성 검증 장치 및 평가 방법{APPARATUS AND METHOD FOR SUITABILITY TEST OF VIRTUAL NETWORK FUNCTION}
본 발명은 네트워크의 적합성 검증에 관한 기술로서, 보다 상세하게는 가상화 네트워크 장치(Virtual Network Function, VNF)에 대한 적합성 검증 기술에 관한 발명이다.
네트워크 기능 가상화(Network Function Virtualization, NFV)는 가상화 기술을 기반으로 저비용, 고효율 및 신속한 서비스 제공을 위한 새로운 네트워크 생산 환경을 제공하는 기술이다. 현재 네트워크 기능 가상화와 관련하여 많은 연구들이 활발하게 진행되고 있다. 하지만, 네트워크 기능 가상화(Network Function Virtualization, NFV)를 실현하기 위해서는 기존 물리 네트워크 장비의 기능을 유연하게 대체할 수 있도록 가상 네트워크가 물리 네트워크 장비의 성능에 준하는 성능을 갖추어야 하며, 기존 장비의 기능적인 요소를 모두 포함해야 한다.
가상화 기술을 실제 망에 적용하기 위해서는 기존 하드웨어 기반 네트워크 시스템 대비 일정 정도의 예측 가능한 성능을 보장해야 한다. 이를 위해, 다양한 분야에서 네트워크 기능 가상화를 통해 실제 물리 네트워크 장비를 대체하기 위한 연구가 진행되고 있다. 네트워크 기능 가상화를 통해 개발된 가상 네트워크 장치는 다양한 기술을 포함하며, 가상화 방식에 따라 이를 수용하는 시스템의 구성(Hypervisor)이 달라진다. 이와 같이 가상 네트워크 장치(VNF)은 다양한 기술과 기능을 포함하기 때문에 가상 네트워크 장치에 대한 체계적인 시험 절차와 시험 장치가 요구된다.
대한민국 공개특허 제10-2006-0025033호
본 발명이 해결하고자 하는 과제는 다양한 가상 네트워크 장치(VNF)에 대한 체계적인 시험 절차를 정의하고, 네트워크 운용의 요구사항을 충족할 수 있는 적합성 검증 장치 및 평가 방법을 제공하는 것이다.
본 발명에 따른 가상 네트워크 장치의 적합성 검증 장치는 하나 이상의 가상 네트워크 장치(Virtual Network Function) 및 가상 네트워크 장치 명세서(Virtual Network Function Description)를 수신하는 네트워크 기능 수신부, 가상 네트워크 장치 명세서에 기초하여 시험항목을 추출하고, 추출된 시험항목에 대한 세부적인 체크리스트를 지정하여 시험경로를 설정하는 시험경로 결정부 및 결정된 시험경로에 기초하여 하나 이상의 가상 네트워크 장치의 성능을 시험하는 네트워크 시험 수행부를 포함한다.
네트워크 기능 수신부는 수신된 가상 네트워크 장치 및 가상 네트워크 장치 명세서에 기초하여 유효성 검사를 수행한다. 그리고 네트워크 기능 수신부는 수신된 가상 네트워크 장치 데이터 및 가상 네트워크 장치 명세서에 기초하여 시험이력을 조회하여 동일한 가상 네트워크 장치에 대한 시험 보고서가 존재하는지 여부를 판단하여 시험경로 설정 과정을 생략할 수 있다.
시험경로 결정부는 수신된 시험 명세서에 기초하여 다수의 추출된 시험항목에 우선순위를 설정하거나, 새로운 시험항목을 추가할 수 있다. 그리고 네트워크 시험 수행부는 시험경로에 포함된 둘 이상의 시험항목에 대해 병렬화 가능여부를 판단하고, 판단 결과에 따라 시험항목에 대해 병렬적 방식 또는 직렬적 방식으로 네트워크 시험을 수행한다. 또한, 네트워크 시험 수행부는 시험 효율성을 고려하여 다수의 시험항목의 시험 순서를 결정할 수 있다.
본 발명에 따른 가상 네트워크 장치의 적합성 검증 장치는 시험 명세서에 기초하여 상기 가상 네트워크 장치의 시험 결과의 합격 여부를 판단하고, 기 저장된 시험 보고서와 비교하여 시험 보고서를 생성하는 시험 결과 도출부를 더 포함할 수 있다. 시험결과 도출부는 시험을 수행한 가상 네트워크 장치와 동일한 가상 네트워크 장치에 대한 시험이력을 검색하여, 기 저장된 시험 보고서와 상기 생성된 시험 결과를 비교하여 시험 보고서를 생성한다. 그리고 시험결과 도출부는 구비된 저장장치를 통해 생성된 시험 보고서를 저장한다.
본 발명에 따른 가상 네트워크 장치의 적합성 평가 방법은 하나 이상의 가상 네트워크 장치(Virtual Network Function) 및 가상 네트워크 장치 명세서(Virtual Network Function Description)를 수신하는 단계, 가상 네트워크 장치 명세서에 기초하여 시험항목을 추출하는 단계, 추출된 시험항목에 대한 세부적인 체크리스트를 지정하여 시험경로를 설정하는 단계 및 결정된 시험경로에 기초하여 하나 이상의 가상 네트워크 장치의 성능을 시험하는 단계를 포함하며, 가상 네트워크 장치의 시험 결과의 합격 여부를 판단하고, 기 저장된 시험 보고서와 비교하여 시험 보고서를 생성하는 단계를 더 포함할 수 있다.
본 발명에 따른 가상 네트워크 장치의 적합성 검증 장치 및 평가 방법을 통해 개발자들은 개발된 가상 네트워크 장치(VNF)에 대한 총체적인 검증을 수행하고, 다양한 기능의 검증에 필요한 시간적 노력을 줄일 수 있다. 또한, 본 발명을 통해 가상 네트워크 장치에 대한 객관적 지표를 획득하여, 시스템 적용가능성을 가늠해 볼 수 있다.
도 1은 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 네트워크 기능 수신부(120)의 동작구성을 나타내는 도면이다.
도 3a는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 시험경로 결정부(120)의 동작 구성을 나타내는 도면이다.
도 3b는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 시험경로 결정부(120)의 시험경로의 구성 일례를 나타내는 도면이다.
도 4는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 네트워크 시험 수행부(130)의 동작구성을 나타내는 도면이다.
도 5는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 시험 결과 도출부(140)의 동작구성을 나타내는 도면이다.
도 6은 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 평가 방법을 나타내는 흐름도이다.
도 7은 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 평가 방법의 새로운 시험경로 설정 방법의 흐름도이다.
이하, 본 발명의 실시예를 첨부된 도면들을 참조하여 상세하게 설명한다. 본 명세서에서 사용되는 용어 및 단어들은 실시예에서의 기능을 고려하여 선택된 용어들로서, 그 용어의 의미는 발명의 의도 또는 관례 등에 따라 달라질 수 있다. 따라서 후술하는 실시예에서 사용된 용어는, 본 명세서에 구체적으로 정의된 경우에는 그 정의에 따르며, 구체적인 정의가 없는 경우는 당업자들이 일반적으로 인식하는 의미로 해석되어야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 구성도이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)는 네트워크 기능 수신부(110), 시험경로 결정부(120), 네트워크 시험 수행부(130) 및 시험 결과 도출부(140)를 포함한다.
네트워크 기능 수신부(110)는 가상 네트워크 장치(Virtual Network Function, VNF) 데이터 및 가상 네트워크 장치 명세서(Virtual Network Function Description, VNFd)를 수신한다. 그리고 네트워크 기능 수신부(110)는 추가로 시험 명세서(Test Description, TESTd)에 대한 데이터를 수신할 수 있다. 상기 세 타입의 데이터는 시험의 입력요소로 정의될 수 있다.
가상 네트워크 장치(VNF) 데이터는 실제 개발된 하나 이상의 가상 네트워크 장치를 나타내는 데이터이다. 가상 네트워크 장치의 데이터는 실제 가상 네트워크 장치의 이진파일을 포함한 가상 네트워크 장치 이미지 형태로 제공될 수 있다. 다만, 가상 네트워크 장치의 데이터 형태는 플랫폼에 따라 그 형태가 달라질 수 있다. 이하, 가상 네트워크 장치 데이터는 가상 네트워크 장치의 이미지 형태를 포함하는 의미로 사용된다.
가상 네트워크 장치 명세서(VNFd)는 대응하는 가상 네트워크 장치(VNF)에 대한 정보, 특히 가상 네트워크 장치의 네트워크 시험에 유용한 정보를 포함한다. 가상 네트워크 장치 명세서(VNFd)는 가상 네트워크 장치 명세서(VNFd)의 식별자(ID), 가상 네트워크 장치의 개발 업체(vendor) 및 가상 네트워크 장치(VNF)의 프로그램 버전에 대한 정보를 포함한다. 네트워크 기능 수신부(110)는 가상 네트워크 장치 명세서(VNFd)의 정보에 기초하여 유효성 검사를 수행한다.
시험 명세서(TESTd)는 선택적인 입력 사항으로서, 네트워크 기능에 대한 시험의 합격 기준 또는 수행할 시험 등을 기술하는 문서이다. 예를 들어, 같은 네트워크 기능에 대한 시험을 하더라도 이를 활용하고자 하는 환경에 따라 시험에 요구되는 수준을 다를 수 있으므로, 본 발명에서는 시험 명세서를 통해 시험 요구 수준을 가변적으로 적용할 수 있다.
시험 명세서(TESTd)는 시험 명세서(TESTd)에 대한 식별자, 시험 수행을 요청한 사람의 정보(Executor) 및 시험 명세서(TESTd)의 버전에 대한 정보와 같은 기본정보를 포함할 수 있다. 네트워크 기능 수신부(110)는 시험 명세서(TESTd)의 기본정보를 통해 식별자와 버전을 관리함으로써 시험이력 관리가 가능하다.
네트워크 기능 수신부(110)는 수신된 입력요소(VNF, VNFd, TESTd)를 바탕으로 유효성 검사를 한다. 그리고 네트워크 기능 수신부(110)는 수신된 가상 네트워크 장치 데이터(이미지), 가상 네트워크 장치 명세서(VNFd) 및/또는 시험 명세서(TESTd)에 기초하여 시험이력을 조회하여, 이전에 동일한 가상 네트워크 장치에 대한 시험이력이 존재하는지 여부를 판단한다.
네트워크 기능 수신부(110)는 수신된 가상 네트워크 장치 데이터(이미지)가 가상 네트워크 장치의 적합성 검증 장치(100)에서 적합성 평가를 지원하지 않는 가상화 타입이거나 정상적인 가상 네트워크 장치 데이터가 아니라고 판단되면, 유효하지 않은 것으로 판단하여, 이에 대한 보고를 출력하여 사용자에게 제공한다. 그리고 네트워크 기능 수신부(110)는 기존 시험이력과 비교하여 변경사항이 없는 경우 즉, 가상 네트워크 장치 데이터, 가상 네트워크 장치 명세서 및 시험 명세서에 대한 수정이 없는 경우, 불필요한 시험을 수행하지 않을 수 있다.
네트워크 기능 수신부(110)는 수신된 입력요소와 기존 시험이력에 포함된 시험 보고서를 비교하여 시험경로를 새로 설정할 필요가 없다고 판단되면, 이전과 동일한 시험경로로 네트워크 시험이 수행될 수 있도록 네트워크 시험 수행부(130)로 시험경로를 바로 전달한다.
반면에, 네트워크 기능 수신부(110)는 수신된 입력요소와 기존 시험이력을 비교하여 시험경로를 새로 설정할 필요가 있다고 판단되면, 시험경로 결정부(120)로 입력요소(VNF, VNFd, TESTd)를 전달한다. 예를 들어, 네트워크 기능 수신부(110)는 수신된 가상 네트워크 장치가 이전의 시험이력이 없거나, 가상 네트워크 장치 명세서 및/또는 시험 명세서의 내용이 이전 시험이력과 상이할 경우 새로운 시험경로를 설정하도록 입력요소를 시험경로 결정부(120)로 전달한다.
시험경로 결정부(120)는 네트워크 기능 수신부(110)로부터 수신된 입력 요소에 기초하여 시험경로를 설정한다. 특히, 시험경로 결정부(120)는 가상 네트워크 장치 명세서 및/또는 시험 명세서에 기초하여 시험경로를 설정할 수 있다. 시험경로 결정부(120)는 가상 네트워크 장치 명세서 및/또는 시험 명세서로부터 하나 이상의 시험항목을 추출하고, 추출된 시험항목 각각에 대한 체크리스트를 설정함으로써 시험경로를 설정 및 결정한다.
네트워크 시험 수행부(130)는 시험경로 결정부(120)에서 산출된 시험경로를 바탕으로 하나 이상의 가상 네트워크 장치에 대한 성능 시험을 수행한다. 그리고 네트워크 시험 수행부(130)는 다수의 시험기능에 대해 병렬화 가능여부를 확인하여 병렬화로 처리하는 시험기능과 직렬화로 처리하는 시험기능을 구분한다.
네트워크 시험 수행부(130)는 각각의 시험기능(370)에 대해 네트워크 시험이 모두 수행된 후에는 시험결과를 병합하여 시험 결과 도출부(140)로 전달한다. 네트워크 시험 수행부(130)의 시험결과는 각 시험기능에 대한 결과 값(수치)를 포함한다.
시험 결과 도출부(140)는 네트워크 시험 수행부(130)로부터 수신된 가상 네트워크 기능 시험 결과를 분석하여 분석 결과를 도출한다. 시험 결과 도출부(140)는 병렬화(510)를 통해 시험 결과 및 시험 명세서를 분석하여 각각의 시험 항목에 대한 합격(Pass) 및 불합격(Fail) 여부를 판단한다. 그리고 모든 시험 결과에 대한 분석이 완료되면, 시험 결과 도출부(140)는 현재 시험을 수행한 가상 네트워크 장치와 동일한 가상 네트워크 장치에 대한 시험 이력의 존재 여부를 확인하고, 유사 또는 동일한 가상 네트워크 장치에 대한 시험이력 및 비교분석 결과를 시험 보고서에 함께 제공한다.
네트워크 기능 수신부(110), 시험경로 결정부(120), 네트워크 시험 수행부(130) 및 시험 결과 도출부(140)에 대한 설명은 후술하는 도 2 내지 도 5에서 추가적으로 설명하도록 한다.
도 2는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 네트워크 기능 수신부(120)의 동작구성을 나타내는 도면이다.
도 1 및 도 2를 참조하면, 네트워크 기능 수신부(110)는 가상 네트워크 장치(VNF) 데이터 및 가상 네트워크 장치 명세서(VNFd)를 수신한다. 그리고 네트워크 기능 수신부(110)는 추가로 시험 명세서(TESTd)에 대한 데이터를 수신할 수 있다.
가상 네트워크 장치 명세서(VNFd)는 대응하는 가상 네트워크 장치(VNF)에 대한 정보 특히, 가상 네트워크 장치의 네트워크 시험에 유용한 정보를 포함한다. 표 1은 가상 네트워크 장치 명세서(VNFd)의 구성 일례를 나타낸다.
가상 네트워크 장치 명세서의 구성 일례
Identifier Description
ID ID of VNFd
vender The vendor generating this VNFd
version Version of VNF, VNFd
Feature list Provided functions by VNF
Virtualized_resource_requirement Describe the required computation, storage, networking resources characteristics
Hypervisor parameter Hypervisor type, version, etc…
ETC
가상 네트워크 장치 명세서(VNFd)는 가상 네트워크 장치 명세서(VNFd)의 식별자(ID), 가상 네트워크 장치의 개발 업체(vendor) 및 가상 네트워크 장치(VNF)의 프로그램 버전에 대한 정보를 포함한다. 네트워크 기능 수신부(110)는 가상 네트워크 장치 명세서(VNFd)의 정보에 기초하여 유효성 검사를 수행한다.
그리고 가상 네트워크 장치 명세서(VNFd)는 가상 네트워크 장치(VNF)이 제공하는 기능 리스트 및 해당 가상 네트워크 기능에 대한 프로파일을 포함한다. 일례로서, 해당 가상 네트워크 장치가 라우터인 경우, 가상 네트워크 장치 명세서(VNFd)는 라우터가 제공하는 기능 리스트 및 이에 대한 프로파일을 포함한다. 즉, 라우터 가상 네트워크 장치의 경우 제공하는 라우팅 프로토콜 리스트, 서포트 할 수 있는 라우팅 테이블의 개수 및 초당 패킷 처리량 등에 대한 정보를 포함한다.
또한, 가상 네트워크 장치 명세서(VNFd)는 해당 가상 네트워크 장치(VNF)를 구동하는데 요구되는 자원량(Resource)에 대한 정보를 포함할 수 있다. 예를 들어, 가상 네트워크 장치 명세서(VNFd)는 해당 가상 네트워크 장치(VNF)가 요구하는 가상 CPU 코어 수, 메모리 용량 및 가상 네트워크 인터페이스 카드의 수 등에 대한 정보를 포함할 수 있다.
또한, 가상 네트워크 장치 명세서(VNFd)는 해당 가상 네트워크 장치(VNF)의 가상화에 대한 정보를 포함한다. 가상 네트워크 장치 명세서(VNFd)는 해당 가상 네트워크 장치(VNF)의 가상화에 대한 정보의 일례로 하이퍼바이저 타입 및 버전 등에 대한 정보를 포함할 수 있다. 네트워크 시험 수행부(130)는 가상 네트워크 장치 명세서(VNFd)에 포함된 하이퍼바이저 타입 및 버전 등에 대한 정보에 기초하여 시험 수행을 위한 시스템 환경을 유기적으로 제공할 수 있다.
시험 명세서(TESTd)는 선택적인 입력 사항으로서, 시험 명세서(TESTd)에 대한 식별자, 시험 수행을 요청한 사람의 정보(Executor) 및 시험 명세서(TESTd)의 버전에 대한 정보와 같은 기본정보를 포함할 수 있다. 네트워크 기능 수신부(110)는 시험 명세서(TESTd)의 기본정보를 통해 식별자와 버전을 관리함으로써 시험이력 관리가 가능하다. 사용자(시험 수행자)는 시험 명세서(TESTd)에 요구되는 시험을 추가 기술할 수 있다.
그리고 사용자는 시험 명세서(TESTd)를 통해 할당해야 할 가상 자원량을 지정할 수 있다. 사용자에 따라 가용 자원량과 필요로 하는 가상 네트워크 기능이 서로 상이할 수 있으므로, 네트워크 기능 수신부(110)는 사용자가 직접 시험 명세서를 작성할 수 있도록 지원한다. 또한, 각 시험에 대한 시험통과 기준을 시험 명세서(TESTd)를 통해 지정할 수 있다. 또한, 사용자는 시험 명세서를 통해 네트워크 시험 항목에 직접적으로 관여할 수 있다. 표 2는 시험 명세서의 일례를 나타낸다.
시험 명세서의 구성 일례
Identifier Description
ID ID of TESTd
executor The person for executing this Test
version Version of TESTd
Required Test list Required Test for VNF
Virtualized_resources_allocation Describe the allocated computation, storage, networking resources characteristics
Pass criterion Requirement for test result to get "pass"
ETC
도 3a는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 시험경로 결정부(120)의 동작 구성을 나타내는 도면이다.
도 3a를 참조하면, 본 발명의 일 실시예에 따른 가상 네트워크 장치(100)의 시험경로 결정부(120)는 네트워크 기능 수신부(110)로부터 수신된 입력요소에 기초하여 시험경로를 판단한다. 시험경로 결정부(120)는 수신된 입력요소를 가상 네트워크 장치 데이터, 가상 네트워크 장치 명세서 및 시험 명세서로 분류한다. 그리고 시험경로 결정부(120)는 가상 네트워크 장치 명세서(VNFd)에 기초하거나, 또는 가상 네트워크 장치 명세서(VNFd)와 시험 명세서(TESTd)에 기초하여 시험경로를 설정할 수 있다. 수신된 가상 네트워크 장치 데이터는 시험경로 설정 과정에서 직접 활용되지 않으며, 시험경로가 설정된 이후 네트워크 시험 수행부(130)에서 네트워크 시험을 수행할 때 활용되도록 시험경로 결정부(120)의 동작 구성 마지막에 위치한 통합 절차(305)로 바로 이동된다.
가상 네트워크 장치 명세서 및 시험 명세서는 시험경로 결정부(120)에서 시험경로를 설정하는데 필요한 정보를 포함한다. 시험경로 결정부(120)는 가상 네트워크 장치 명세서에 기술된 하나 이상의 요소를 바탕으로 각 요소와 관련된 시험항목(310, 320, 330, 340)을 분류하여 추출하고, 추출된 시험항목을 바탕으로 각 네트워크 시험에 대한 세부적인 체크리스트(311, 312, 313, 314)를 지정하여 시험항목과 시험사항을 매핑한다. 각각의 체크리스트는 하나 이상의 시험기능(Test Function)을 포함한다. 즉, 시험경로 결정부(120)는 가상 네트워크 장치 명세서 및/또는 시험 명세서로부터 하나 이상의 시험항목을 추출하고, 추출된 시험항목 각각에 대한 체크리스트를 설정함으로써 시험경로를 설정 및 결정한다.
시험경로 결정부(120)는 가상 네트워크 장치 명세서를 통해 가상 네트워크 장치의 가상화 방식(Type of Virtualization, 310)을 확인한다. 가상 네트워크 장치 명세서에 기재된 요소 중 하나인 가상화 방식(310)을 기반으로, 시험경로 결정부(120)는 직접적인 관련이 있는 하나 이상의 시험 기능(311)을 리스트업 할 수 있다. 또한, 시험경로 결정부(120)는 해당 시험기능들과 관련된 체크리스트를 선별 및 추출할 수 있다.
예를 들어, 가상 네트워크 장치의 가상화 방식이 KVM(Kernel-based Virtual Machine)인 경우 실제적인 시험은 KVM기반 시스템 상에서 수행되어야 한다. 따라서, 시험경로 결정부(120)는 KVM에 대해 호환성 검사(Compatibility Test)를 수행하기 위하여 KVM시스템을 구축하며 대상 플랫폼(Target Platform)에서 KVM 기반의 가상화 방식을 지원하는지 여부 등의 체크리스트를 추출할 수 있다. 이와 같은 원리로 하나의 가상 네트워크 장치 명세서(VNFd)에 명기된 요소는 다수의 네트워크 시험의 체크리스트를 선별하는데 중요한 요소로 작용할 수 있으며, 반대로 하나의 시험기능은 다수의 가상 네트워크 명세서의 요소에 의해 영향을 받을 수 있다.
본 발명에 따른 가상 네트워크 장치의 적합성 검증 장치(100)는 시험경로 결정부(120)에서 추출된 시험항목의 체크리스트 전부에 대해 네트워크 시험을 수행할 수 있다. 하지만, 본 발명에 따른 가상 네트워크 장치의 적합성 검증 장치(100)는 반드시 시험항목 또는 시험항목의 체크리스트 전부에 대해 네트워크 시험을 수행해야 하는 것은 아니다.
시험경로 결정부(120)는 시험 명세서를 활용하여 추출된 시험항목 중에서 필요에 따라 하나 이상의 시험항목을 선택할 수 있다. 예를 들어, 하나의 가상 네트워크 장치에 대해 시험에 소요되는 시간을 염두하여 다수의 시험항목 중에서 우선순위를 부여할 수 있다. 네트워크 시험 수행부(130)는 시험항목의 우선순위에 따라 네트워크 시험을 수행하며, 상대적으로 우선 순위가 떨어지는 시험항목에 대해서는 네트워크 시험을 생략하거나 추후로 미룰 수 있다. 따라서, 사용자는 시험 명세서를 통해 시험항목에 직접적으로 관여하여 시험항목을 조종할 수 있다.
또한, 시험경로 결정부(120)는 시험 명세서를 활용하여 추출된 시험항목에 새로운 시험항목을 추가할 수 있다. 하나의 가상 네트워크 장치를 사용함에 있어서 해당 가상 네트워크 장치가 활용되는 상황이나 적용되는 대상 시스템에 따라 요구조건이 달라질 수 있다. 예를 들어, 가상 네트워크 장치가 NAT(National Address Translation)인 경우, 변환(Translation)을 지원할 수 있는 주소(Address)의 개수에 따라 시험항목의 등급을 달리할 수 있으며, NAT를 적용할 환경의 규모에 맞추어 시험항목의 수준(체크리스트)를 조정할 수 있다. 이를 통해, 본 발명은 사용자 맞춤형으로 가상 네트워크 장치에 대한 시험을 수행할 수 있다.
즉, 시험경로 결정부(120)는 수신된 가상 네트워크 명세서로부터 시험항목을 추출하여 기본적인 시험의 통과기준을 확인하고, 수신된 시험 명세서를 통해 사용자의 의도에 따라 시험기준을 상향/하향 또는 추가/삭제할 수 있다.
또한, 전반적인 시험 과정을 신속하게 수행하기 위해 가상 네트워크 장치 명세서의 요소에 따라 시험경로를 결정하는 과정을 병렬적으로 수행한 후 병합하여 시험경로를 출력할 수 있다. 즉, 시험경로 결정부(120)는 도 3의 다수의 시험항목(310, 320, 330, 340)에 대해 세부적인 체크리스트(311, 321, 331, 341)를 설정하고 시험항목 및 체크리스트를 조정하는 과정을 동시에 병렬적으로 수행할 수 있다.
도 3b는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 시험경로 결정부(120)의 시험경로의 구성 일례를 나타내는 도면이다.
도 3a 및 도 3b를 참조하면, 도 3b은 시험경로 결정부(120)에 의해 결정된 시험경로의 구성 일례이다. 시험경로 결정부(120)는 결정된 시험경로의 체크리스트를 시험기능과 매핑하는 단계를 수행한다. 시험기능은 가상 네트워크 장치에서 성능을 테스트하고자 하는 기능을 나타낸다. 도 3b에 도시된 시험경로의 일례에서는 다양한 종류의 시험기능(370)을 포함한다. 일례로서, 시험기능(370)은 자원 할당 시험(Resource Allocation Testing), 설치 시험(Installation Testing), 호환성 시험(Compatibility Testing), 기능 시험(Functional Testing), 파괴 시험(Destructive Testing), 성능 시험(Performance Testing), 사용성 시험(Usability Testing) 및 보안 시험(Security Testing)를 포함한다.
시험경로 결정부(120)는 상술한 바와 같이 가상 네트워크 장치 명세서의 요소에 따라 시험 수행과정에서 검증되어야 할 체크리스트를 추출한다. 예를 들어, 성능 관련 체크리스트를 추출할 경우, 네트워크 기능에 따라 성능을 측정하는 요소가 다르기 때문에 가상 네트워크 장치마다 그 차이를 두어야 한다. 또한, 시험경로 결정부(120)는 실험 명세서를 고려하여 가상 네트워크 장치 명세서에 기본적으로 포함되지 않은 성능 측정 요소를 추가할 수 있다.
모든 네트워크 시험에 대해 추출된 체크리스트는 실제 시험의 종류(Type of Testing)에 따라 분류가 가능하다. 네트워크 시험은 다수의 시험 기능(Test Function)을 보유하고 있으며, 체크리스트(Check list)는 보유한 시험기능에 따라 분류될 수 있다. 도 3b의 일례에서, 체크리스트 #1, #3, #4, #8, #9는 Test #1(Test Function)인 자원 할당(resource allocation) 시험에 매핑 되어 독립적인 제1 시험 체크리스트(check list for Test #1)의 체크리스트 #1, #2, #3, #4로 구성된다.
이와 같이 시험에 따라 분류과정을 통해 네트워크 시험 수행부(130)는 전체 시험에 대한 최적화를 수행하는 과정에서, 상호 독립적으로 네트워크 기능에 대한 시험을 수행할 수 있다. 네트워크 기능에 대한 각각의 시험 마다 별도의 체크리스트를 보유함으로써 각 시험은 병렬화 되어 수행될 수 있으며, 결국 시험에 소요되는 시간을 줄일 수 있다. 그 결과로 각각의 네트워크 시험에 대한 체크리스트가 선정될 수 있다.
또한, 시험경로 결정부(120)는 시험 명세서를 통해 별도로 기본적으로 제공하지 않는 체크리스트를 추가할 수 있다. 새롭게 추가된 하나 이상의 체크리스트의 집합은 새로운 시험기능으로 정의될 수 있다. 사용자는 이와 같이 시험 명세서를 통해 본인이 원하는 시험항목을 직접 정의할 수 있다.
도 4는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 네트워크 시험 수행부(130)의 동작구성을 나타내는 도면이다.
도 4를 참조하면, 네트워크 시험 수행부(130)는 시험경로 결정부(120)에서 설정된 시험경로를 바탕으로 하나 이상의 가상 네트워크 장치에 대한 성능 시험을 수행한다. 시험경로 결정부(120)에서 설정된 시험경로는 둘 이상의 시험기능(370)에 대한 체크리스트를 포함할 수 있다. 네트워크 시험 수행부(130)는 둘 이상의 시험기능(370)에 대해 병렬화 가능여부를 확인하는 절차를 거친다. 네트워크 시험 수행부(130)는 시험기능 병렬화를 통해 네트워크 시험 절차를 간소화할 수 있다.
예를 들어, 시험기능#1(Test #1)과 시험기능#3(Test #3)이 병렬화가 가능하다면, 네트워크 시험 수행부(130)는 시험기능#1(Test #1) 및 시험기능#3(Test #3)을 병렬화된 형태로 분류하여 병렬적 방식(410)으로 네트워크 시험을 수행한다. 반면에, 병렬화가 불가능한 경우, 네트워크 시험 수행부(130)는 직렬화된 형태로 분류하여 직렬적 방식(420)으로 네트워크 시험을 수행한다.
직렬화된 형태로 네트워크 시험을 수행하는 경우, 네트워크 시험 수행부(130)는 직렬화 형태로 분류된 시험기능(421)에 대해 시험 효율성을 고려하여 시험 순서를 결정하여, 시험 순서를 스케줄링 할 수 있다. 네트워크 시험 수행부(130)는 실제 네트워크 시험이 수행되는 동안, 시험 수선에 대한 스케줄링 결과를 바탕으로 각 시험 수행에 대한 상태정보를 보여주며, 상태정보에는 네트워크 시험 수행 완료시간 또한 포함될 수 있다.
네트워크 시험 수행부(130)는 각각의 시험기능(370)에 대해 네트워크 시험이 모두 수행된 후에는 시험결과를 병합하여 시험 결과 도출부(140)로 전달한다. 네트워크 시험 수행부(130)의 시험결과는 각 시험기능에 대한 결과 값(수치)를 포함한다. 예를 들어, 네트워크 시험 수행부(130)에서 네트워크 성능 시험을 수행한 경우, 동시 패킷 처리량(Packet Per Second)이 10,000,000pps로 측정 되었다면, 네트워크 시험 수행부(130)는 해당 값을 바탕으로 패킷 처리량 항목에 대해 해당 값을 결과값으로 출력한다. 표 3은 시험결과의 일례를 나타낸다.
네트워크 시험 수행부의 시험결과의 일례
Identifier Checklist Result
Performance
Test#1		 Packet per second 10Mpps
Check list #2 Value
Check list #3 Value
Check list #4 Value
Test#2 Check list #1 Value
Check list #2 Value
Check list #3 Value
ETC
도 5는 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 시험 결과 도출부(140)의 동작구성을 나타내는 도면이다.
도 5를 참조하면, 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 검증 장치(100)의 시험 결과 도출부(140)는 네트워크 시험 수행부(130)로부터 수신된 가상 네트워크 기능 시험 결과를 분석한다. 시험 결과 도출부(140)는 수신된 시험 결과(result for Test#1~n)에서 각 시험의 결과값을 분석하여 분석 결과를 도출한다.
시험 결과 도출부(140)는 수신된 시험 결과에 대해 병렬화(510)하여 동시에 다수의 시험 결과에 대한 분석을 수행한다. 그리고 시험 결과 도출부(140)는 병렬화(510)를 통해 시험 결과 및 시험 명세서를 분석하여 각각의 시험 항목에 대한 합격(Pass) 및 불합격(Fail) 여부를 판단한다. 시험 결과 도출부(140)는 시험 명세서에 포함된 판단 기준에 따라 각각의 시험항목에 대한 합격 및 불합격 여부를 판단할 수 있다. 또한, 시험 결과 도출부(140)는 시험 명세서를 사용하지 않고 기 저장된 기본 시험 명세서(default TESTd)를 판단 기준으로 활용할 수 있다.
모든 시험 결과에 대한 분석이 완료되면, 시험 결과 도출부(140)는 현재 시험을 수행한 가상 네트워크 장치와 동일한 가상 네트워크 장치에 대한 시험 이력의 존재 여부를 검색한다. 시험 결과 도출부(140)는 특정한 가상 네트워크 장치에 대해 검증을 수행하는 입장에서, 비교 및 참고 가능한 자료를 제공하기 위하여 유사 또는 동일한 가상 네트워크 장치에 대한 시험이력을 시험 보고서(520)에 함께 제공할 수 있다. 그리고 시험 결과 도출부(140)는 유사 또는 동일한 가상 네트워크 장치의 시험 결과와 해당 가상 네트워크 장치의 시험 결과를 비교 분석하여 이를 시험 보고서(520)에 포함시킬 수 있다. 사용자는 유사 또는 동일한 가상 네트워크 장치와의 비교분석을 통해 시험이 수행된 가상 네트워크 장치의 성능개선 여부 등을 쉽게 파악할 수 있다. 시험 결과 도출부(140)에서 제공되는 시험 보고서(520)를 통해, 가상 네트워크 장치 개발자, 플랫폼 관리자 및 가상 네트워크 장치 사용자는 해당 가상 네트워크 장치에 대해 수행된 네트워크 시험에 대한 상세한 결과를 얻을 수 있다.
시험 결과 도출부(140)는 내부에 구비된 저장장치를 통해 시험 보고서(520)를 저장(530)한다. 시험 보고서(520)는 가상 네트워크 장치의 시험 결과, 분석 결과 및 비교 결과를 포함할 수 있다. 시험 결과 도출부(140)에 저장되어 누적된 시험 결과 및 시험 보고서는 향후 가상 네트워크 장치에 대한 네트워크 시험을 수행할 때, 네트워크 기능 수신부(110) 및 시험경로 결정부(120)에서 다시 활용될 수 있다.
표 4는 시험 결과 도출부(140)에서 생성되는 시험 보고서의 일례를 나타낸다. 시험 결과 도출부(140)에서 생성되는 시험 보고서는 시험 결과뿐만 아니라, 시험 결과를 바탕으로한 분석 및 판단 결과가 추가될 수 있다. 이외에, 시험 보고서는 가시성을 높일 수 있는 다양한 형태의 분석자료도 추가적으로 포함할 수 있다.
시험 결과 도출부의 시험 보고서의 일례
Identifier Checklist Result criterion Pass/Fail
Performance
Test#1		 Packet per second 10Mpps 5Mpps Pass
Check list #2 Value Pass
Check list #3 Value Fail
Check list #4 Value Pass
Test#2 Check list #1 Value Pass
Check list #2 Value Pass
Check list #3 Value Pass
ETC
도 6은 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 평가 방법을 나타내는 흐름도이다.
도 1 및 도 6을 참조하면, 본 발명에 따른 가상 네트워크 장치의 적합성 평가 방법은 먼저 가상 네트워크 장치의 적합성 검증 장치(100, 이하 적합성 검증 장치)가 가상 네트워크 장치(VNF) 데이터, 가상 네트워크 장치 명세서(VNFd) 및 시험 명세서(TESTd)를 수신한다(S601). 여기서 시험 명세서는 반드시 수신되는 정보는 아니며, 선택적으로 수신될 수 있다. 가상 네트워크 장치 데이터, 가상 네트워크 장치 명세서 및 시험 명세서는 도 1 내지 도 5의 기재와 동일하다.
적합성 검증 장치(100)는 수신된 입력요소(VNF, VNFd, TESTd)를 바탕으로 유효성 검사를 수행한다(S602). 적합성 검증 장치(100)는 수신된 가상 네트워크 장치 데이터(이미지)가 지원하지 않는 가상화 타입이거나 정상적인 가상 네트워크 장치 데이터가 아니라고 판단되면, 유효하지 않은 것으로 판단하여, 이에 대한 보고를 출력하여 사용자에게 제공한다.
그리고 적합성 검증 장치(100)는 수신된 가상 네트워크 장치 데이터, 가상 네트워크 장치 명세서(VNFd) 및/또는 시험 명세서(TESTd)에 기초하여 시험이력을 조회한다(S603). 적합성 검증 장치(100)는 기 저장된 다수의 시험 보고서를 조회하여 시험대상 가상 네트워크 장치와 동일 또는 유사한 가상 네트워크 장치에 대한 네트워크 시험이력이 존재하는지 여부를 판단한다(S604). 만약, 대상 가상 네트워크와 동일 또는 유사한 가상 네트워크 장치에 대한 시험이력이 존재하지 않는다면, 적합성 검증 장치(100)는 새로운 시험경로를 설정한다(S605). 새로운 시험경로를 설정하는 과정은 후술하는 도 7에서 구체적으로 설명한다. 만약, 동일 또는 유사한 시험이력이 존재하면, 적합성 검증 장치(100)는 새로운 시험경로를 설정하지 않고, 종래의 시험 보고서에 포함된 시험경로를 재활용한다.
다음으로, 적합성 검증 장치(100)는 설정된 시험경로(새로운 시험경로 또는 저장된 시험경로)에 따라 네트워크 시험을 수행한다(S606). 적합성 검증 장치(100)는 다수의 시험기능에 대해 병렬화 가능여부를 확인하여 병렬화로 처리하는 시험기능과 직렬화로 처리하는 시험기능을 구분한다. 그리고 적합성 검증 장치(100)는 각각의 시험기능에 대해 네트워크 시험이 모두 수행된 후에는 시험결과를 병합한다. 구체적인 네트워크 시험 과정은 상술한 도 4 및 그에 따른 기재를 참조한다.
그리고 적합성 검증 장치(100)는 가상 네트워크 기능 시험 결과를 분석하여 분석 결과를 도출한다(S607). 적합성 검증 장치(100)는 병렬화를 통해 시험 결과 및 시험 명세서를 분석하여 각각의 시험 항목에 대한 합격 및 불합격 여부를 판단한다. 그리고 적합성 검증 장치(100)는 모든 시험 결과에 대한 합격 여부를 판단하고, 현재 시험을 수행한 가상 네트워크 장치와 동일한 가상 네트워크 장치에 대한 시험 이력의 존재 여부를 확인하고, 유사 또는 동일한 가상 네트워크 장치에 대한 시험이력 및 비교분석 결과를 시험 보고서에 함께 제공한다.
도 7은 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 평가 방법의 새로운 시험경로 설정 방법의 흐름도이다.
도 6 및 도 7을 참조하면, 본 발명의 일 실시예에 따른 가상 네트워크 장치의 적합성 평가 방법의 새로운 시험경로 설정 방법은 먼저 시험요소를 가상 네트워크 장치 데이터, 가상 네트워크 장치 데이터 명세서 및 시험 명세서로 분류한다(S701). 가상 네트워크 장치 명세서 및 시험 명세서는 시험경로를 설정하는데 필요한 정보를 포함한다. 그리고 적합성 검증 장치(100)는 가상 네트워크 장치 명세서에 기술된 하나 이상의 요소를 바탕으로 각 요소와 관련된 시험항목을 분류하여 추출(S702)하고, 추출된 시험항목을 바탕으로 각 네트워크 시험에 대한 세부적인 체크리스트를 지정한다(S703). 각각의 체크리스트는 하나 이상의 시험기능(Test Function)을 포함한다.
적합성 검증 장치(100)는 시험 명세서에 기초하여 추출된 다수의 시험항목에 대해 우선순위를 설정한다(S704). 적합성 검증 장치(100)는 체크리스트를 포함하는 시험항목 전부에 대해 네트워크 시험을 수행할 수 있다. 하지만, 본 발명에서 반드시 시험항목 또는 시험항목의 체크리스트 전부에 대해 네트워크 시험을 수행해야 하는 것은 아니다. 적합성 검증 장치(100)는 추출된 시험항목 중에서 필요에 따라 하나 이상의 시험항목을 선택하여 시험에 대한 우선순위를 설정할 수 있다. 예를 들어, 하나의 가상 네트워크 장치에 대해 시험에 소요되는 시간 또는 자원을 고려하여 다수의 시험항목 중에서 우선순위를 부여할 수 있다. 적합성 검증 장치(100)는 시험항목의 우선순위에 따라 네트워크 시험을 수행하며, 상대적으로 우선 순위가 떨어지는 시험항목에 대해서는 네트워크 시험을 생략하거나 추후로 미룰 수 있다. 이와 같은 시험항목의 우선순위는 시험 명세서에 기초하여 설정될 수 있다.
그리고 적합성 검증 장치(100)는 시험 명세서로부터 새로운 시험항목을 추가한다(S705). 하나의 가상 네트워크 장치를 사용함에 있어서 해당 가상 네트워크 장치가 활용되는 상황이나 적용되는 대상 시스템에 따라 요구조건이 달라질 수 있다. 따라서, 수신된 시험 명세서를 통해 사용자의 의도에 따라 시험기준을 상향/하향 또는 추가/삭제할 수 있다. 704 단계 및 705 단계는 필수적인 처리 단계는 아니며 선택적으로 사용 또는 생략할 수 있다. 적합성 검증 장치(100)는 이와 같은 과정을 통해 체크리스트가 설정된 시험항목을 -마하는 시험경로를 설정한다(S706).
상술한 내용을 포함하는 본 발명은 컴퓨터 프로그램으로 작성이 가능하다. 그리고 상기 프로그램을 구성하는 코드 및 코드 세그먼트는 당분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 작성된 프로그램은 컴퓨터가 읽을 수 있는 기록매체 또는 정보저장매체에 저장되고, 컴퓨터에 의하여 판독되고 실행함으로써 본 발명의 방법을 구현할 수 있다. 그리고 상기 기록매체는 컴퓨터가 판독할 수 있는 모든 형태의 기록매체를 포함한다.
이상 바람직한 실시예를 들어 본 발명을 상세하게 설명하였으나, 본 발명은 전술한 실시예에 한정되지 않고, 본 발명의 기술적 사상의 범위 내에서 당분야에서 통상의 지식을 가진자에 의하여 여러 가지 변형이 가능하다.
100: 가상 네트워크 장치의 적합성 평가 장치
110: 네트워크 기능 수신부
120: 시험경로 결정부
130: 네트워크 시험 수행부
140: 시험 결과 도출부

Claims (16)

  1. 하나 이상의 가상 네트워크 장치(Virtual Network Function) 및 가상 네트워크 장치 명세서(Virtual Network Function Description)를 수신하는 네트워크 기능 수신부;
    상기 가상 네트워크 장치 명세서에 기초하여 시험항목을 추출하고, 추출된 시험항목에 대한 세부적인 체크리스트를 지정하여 시험경로를 설정하는 시험경로 결정부; 및
    상기 결정된 시험경로에 기초하여 하나 이상의 가상 네트워크 장치의 성능을 시험하는 네트워크 시험 수행부;를 포함하고,
    상기 네트워크 기능 수신부는 시험 명세서(Test Description)를 수신하고, 상기 시험경로 결정부는 상기 수신된 시험 명세서에 기초하여 다수의 상기 추출된 시험항목에 우선순위를 설정하고, 새로운 시험항목을 추가하거나 기존의 시험항목을 삭제하는 것을 특징으로 하는 가상 네트워크 장치의 적합성 검증 장치.
  2. 제1항에 있어서,
    상기 네트워크 기능 수신부는 상기 수신된 가상 네트워크 장치 및 상기 가상 네트워크 장치 명세서에 기초하여 수신된 가상 네트워크 장치 데이터가 지원하지 않는 가상화 타입이거나 정상적인 가상 네트워크 장지 데이터인지 판단하는 유효성 검사를 수행하는 가상 네트워크 장치의 적합성 검증 장치.
  3. 제1항에 있어서,
    상기 가상 네트워크 장치 명세서는 가상 네트워크 장치에 대한 식별자, 개발 업체 정보 및 프로그램 정보 중에서 적어도 하나 이상의 정보를 포함하는 가상 네트워크 장치의 적합성 검증 장치.
  4. 제1항에 있어서,
    상기 네트워크 기능 수신부는 수신된 가상 네트워크 장치 데이터 및 가상 네트워크 장치 명세서에 기초하여 기 저장된 시험이력을 조회하여 동일한 가상 네트워크 장치에 대한 시험 보고서가 존재하는지 여부를 판단하여 시험경로 설정 과정을 생략하는 것을 특징으로 하는 가상 네트워크 장치의 적합성 검증 장치.
  5. 삭제
  6. 삭제
  7. 제1항에 있어서,
    상기 네트워크 시험 수행부는 상기 시험경로에 포함된 둘 이상의 시험항목에 대해 병렬화 가능여부를 판단하고, 판단 결과에 따라 상기 시험항목에 대해 병렬적 방식 또는 직렬적 방식으로 네트워크 시험을 수행하는 가상 네트워크 장치의 적합성 검증 장치.
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 하나 이상의 가상 네트워크 장치(Virtual Network Function) 및 가상 네트워크 장치 명세서(Virtual Network Function Description)를 수신하는 단계;
    상기 가상 네트워크 장치 명세서에 기초하여 시험항목을 추출하는 단계;
    추출된 시험항목에 대한 세부적인 체크리스트를 지정하여 시험경로를 설정하는 단계; 및
    상기 설정된 시험경로에 기초하여 하나 이상의 가상 네트워크 장치의 성능을 시험하는 단계;를 포함하고,
    추출된 시험항목에 대한 세부적인 체크리스트를 지정하여 시험경로를 설정하는 단계는,
    시험 명세서(Test Description)를 수신하는 단계;
    상기 수신된 시험 명세서에 기초하여 다수의 상기 추출된 시험항목에 우선순위를 설정하는 단계; 및
    새로운 시험항목을 추가하거나 기존의 시험항목을 삭제하는 단계를 더 포함하는 가상 네트워크 장치의 적합성 평가 방법.
  13. 삭제
  14. 삭제
  15. 제12항에 있어서,
    수신된 가상 네트워크 장치 데이터 및 가상 네트워크 장치 명세서에 기초하여 시험이력을 조회하여 동일한 가상 네트워크 장치에 대한 시험 보고서가 존재하는지 여부를 판단하여 시험경로 설정 과정을 생략하는 단계;
    를 더 포함하는 것을 특징으로 하는 가상 네트워크 장치의 적합성 평가 방법.
  16. 삭제
KR1020160057735A 2016-05-11 2016-05-11 가상 네트워크 장치의 적합성 검증 장치 및 평가 방법 KR102385706B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160057735A KR102385706B1 (ko) 2016-05-11 2016-05-11 가상 네트워크 장치의 적합성 검증 장치 및 평가 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160057735A KR102385706B1 (ko) 2016-05-11 2016-05-11 가상 네트워크 장치의 적합성 검증 장치 및 평가 방법

Publications (2)

Publication Number Publication Date
KR20170127288A KR20170127288A (ko) 2017-11-21
KR102385706B1 true KR102385706B1 (ko) 2022-04-12

Family

ID=60808816

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160057735A KR102385706B1 (ko) 2016-05-11 2016-05-11 가상 네트워크 장치의 적합성 검증 장치 및 평가 방법

Country Status (1)

Country Link
KR (1) KR102385706B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114285780B (zh) * 2021-12-23 2023-12-15 中国电子科技集团公司第十四研究所 一种基于优先级队列的雷达网络测试系统及测试方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008204405A (ja) 2007-02-22 2008-09-04 Fujitsu Ltd ソフトウェアのリグレッションテストシステム、リグレッションテストプログラムおよびリグレッションテスト方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100636404B1 (ko) 2004-09-15 2006-10-18 주식회사 미라콤아이앤씨 자동화 제어 프로그램을 이용한 테스트 방법 및 시스템
KR20150095090A (ko) * 2014-02-12 2015-08-20 한국전자통신연구원 오픈플로우 기반의 통신환경 테스트 사례 생성장치 및 그 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008204405A (ja) 2007-02-22 2008-09-04 Fujitsu Ltd ソフトウェアのリグレッションテストシステム、リグレッションテストプログラムおよびリグレッションテスト方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ETSI GS NFV-MAN 001 V1.1.1, "Network Functions Virtualisation (NFV) Management and Orchestration", ETSI(2014.12.) 1부.*
ETSI GS NFV-TST 001 V1.1.1, "Network Functions Virtualisation (NFV) Pre-deployment Testing Report on Validation of NFV Environments and Services", ETSI(2016.04.) 1부.*

Also Published As

Publication number Publication date
KR20170127288A (ko) 2017-11-21

Similar Documents

Publication Publication Date Title
JP6217212B2 (ja) テストプログラム、テスト方法及びテスト装置
US8078924B2 (en) Method and system for generating a global test plan and identifying test requirements in a storage system environment
EP2095236B1 (en) Method, system and computer program for testing software applications based on multiple data sources
CN107729227B (zh) 应用程序测试范围确定方法、系统、服务器和存储介质
US9921947B2 (en) Test selection method and test selection apparatus
JP2021152711A (ja) オペレータ管理装置、オペレータ管理方法及びオペレータ管理コンピュータープログラム
EP2814208A1 (en) Program, apparatus, and method for creating configuration requirements
CN112685410A (zh) 业务规则校验方法、装置、计算机设备及存储介质
WO2020008991A1 (ja) 検証自動化装置、検証自動化方法、およびコンピュータ読み取り可能な記録媒体
US11302096B2 (en) Determining model-related bias associated with training data
US9158641B2 (en) Cloud auto-test system, method and non-transitory computer readable storage medium of the same
CN110941547A (zh) 自动化测试用例库管理方法、装置、介质及电子设备
KR102385706B1 (ko) 가상 네트워크 장치의 적합성 검증 장치 및 평가 방법
US11656977B2 (en) Automated code checking
US11636386B2 (en) Determining data representative of bias within a model
US9509629B2 (en) Operation environment migration support device, record medium with program stored therefor, and method therefor
US8468116B2 (en) Rule creation method and rule creating apparatus
JP2014174609A (ja) ハードウェア構成見積システム、ハードウェア構成見積方法及びハードウェア構成見積プログラム
CN108229137B (zh) 一种分配文档权限的方法及装置
US11977642B2 (en) Information processing device, information processing method and computer readable medium
US20220138089A1 (en) Smart test executor
US8775873B2 (en) Data processing apparatus that performs test validation and computer-readable storage medium
US20180322290A1 (en) Implementing locale management on paas: locale replacement risk analysis
JP7327635B2 (ja) 仮想マシンの接続制御装置、仮想マシンの接続制御システム、仮想マシンの接続制御方法およびプログラム
JP2015056021A (ja) ホストバスドライバ検証装置、ホストバス検証システム、およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant