KR101751515B1 - 테스트 실행 장치, 방법 및 컴퓨터 프로그램 - Google Patents

테스트 실행 장치, 방법 및 컴퓨터 프로그램 Download PDF

Info

Publication number
KR101751515B1
KR101751515B1 KR1020160015665A KR20160015665A KR101751515B1 KR 101751515 B1 KR101751515 B1 KR 101751515B1 KR 1020160015665 A KR1020160015665 A KR 1020160015665A KR 20160015665 A KR20160015665 A KR 20160015665A KR 101751515 B1 KR101751515 B1 KR 101751515B1
Authority
KR
South Korea
Prior art keywords
test
cluster
test execution
task
item
Prior art date
Application number
KR1020160015665A
Other languages
English (en)
Inventor
유성덕
에센 사그노브
한우람
Original Assignee
네이버 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 네이버 주식회사 filed Critical 네이버 주식회사
Priority to KR1020160015665A priority Critical patent/KR101751515B1/ko
Application granted granted Critical
Publication of KR101751515B1 publication Critical patent/KR101751515B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3696—Methods or tools to render software testable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5038—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the execution order of a plurality of tasks, e.g. taking priority or time dependency constraints into consideration

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Debugging And Monitoring (AREA)

Abstract

본 실시예는 제1 테스트 수행 요청을 수신하는 요청 수신부; 상기 제1 테스트 수행 요청에 포함된 테스트의 환경 및 세부 항목을 추출하고, 상기 환경으로 상기 세부 항목을 수행하도록 하는 작업 생성부; 상기 생성한 작업에 따라 테스트가 수행될 수 있도록 테스트 클러스터를 생성하고, 각 테스트 클러스터를 병렬적으로 실행하도록 제어하는 테스트 실행부;를 포함하는, 테스트 실행 장치를 개시한다.

Description

테스트 실행 장치, 방법 및 컴퓨터 프로그램{APPARATUS, METHOD, AND COMPUTER PROGRAM FOR TESTING}
본 발명은 테스트 실행 장치, 방법 및 컴퓨터 프로그램에 관한 것으로, 보다 구체적으로는 복수의 사용자 단말로부터의 테스트 수행 요청에 따라 수행해야 할 각 테스트를 수행할 수 있는 작업을 생성하고, 각 작업에 따라 하나 이상의 테스트 클러스터를 생성하고, 하나 이상의 테스트 클러스터를 병렬적으로 수행하도록 제어하는 테스트 실행 장치, 방법 및 컴퓨터 프로그램에 관한 것이다.
전자 통신 기술이 발전함에 따라, 다방면의 분야에서 자동화된 시스템, 장치 등을 활용할 수 있다. 자동화된 시스템, 장치 등에서 활용되는 다양한 소프트웨어의 개발 필요성이 대두되고 있다. 개발된 소프트웨어는 기본적인 기능 및 안정성을 테스트한 후 일반에게 공개되는데, 소프트웨어를 테스트하는 환경도 계속적으로 변화하고 있다.
전술한 배경기술은 발명자가 본 발명의 도출을 위해 보유하고 있었거나, 본 발명의 도출 과정에서 습득한 기술 정보로서, 반드시 본 발명의 출원 전에 일반 공중에게 공개된 공지기술이라 할 수는 없다.
본 발명의 실시예들은 제1 사용자에 의해 등록된 하나 이상의 제1 테스트가 수행되는 동안, 제2 사용자에 의해 하나 이상의 제2 테스트가 등록된 경우, 제1 테스트를 수행하면서, 제2 테스트를 수행할 수 있는 테스트 실행 장치, 방법 및 컴퓨터 프로그램을 제공한다.
본 발명의 실시예들에 따른 테스트 실행 장치는 제1 테스트 수행 요청을 수신하는 요청 수신부; 상기 제1 테스트 수행 요청에 포함된 테스트의 환경 및 세부 항목을 추출하고, 상기 환경으로 상기 세부 항목을 수행하도록 하는 작업(Work)을 생성하는 작업 생성부; 상기 생성한 작업에 따라 테스트가 수행될 수 있도록 테스트 클러스터를 생성하고, 각 테스트 클러스터를 병렬적으로 실행하도록 제어하는 테스트 실행부;를 포함할 수 있다.
상기 테스트 실행부는 수행해야 할 테스트의 수를 기초로, 테스트 클러스터(test cluster)를 생성하고, 각 테스트 클러스터를 통해 하나의 테스트를 수행하도록 할 수 있다.
상기 테스트 실행부는 각 테스트 클러스터의 테스트의 세부 항목에 따라 상기 테스트의 실행에 필요한 만큼의 리소스를 할당할 수 있다.
상기 요청 수신부는 제2 사용자 단말기로부터 제2 테스트 수행 요청을 수신하고, 상기 테스트 실행부는 상기 제1 테스트 수행 요청과 대응되는 하나 이상의 제1 테스트 클러스터와는 별개로, 상기 제2 테스트 수행 요청에 포함된 하나 이상의 테스트를 수행할 수 있도록 하나 이상의 제2 테스트 클러스터를 생성하고, 각 테스트 클러스터가 실행될 수 있도록 리소스를 할당할 수 있다.
상기 테스트 실행부는 각 테스트 클러스터의 동작이 완료된 경우, 각 테스트 클러스터를 위한 리소스를 반환(return)하도록 제어할 수 있다.
본 발명의 실시예들에 따른 테스트 실행 방법은 테스트 실행 장치가 제1 사용자 단말기로부터 제1 테스트 수행 요청을 수신하는 단계; 상기 제1 테스트 수행 요청에 포함된 테스트의 환경 및 세부 항목을 추출하고, 상기 환경으로 상기 세부 항목을 수행하도록 하는 단계; 상기 생성한 작업에 따라 테스트가 수행될 수 있도록 테스트 클러스터를 생성하고, 각 테스트 클러스터를 병렬적으로 실행하도록 제어하는 단계;를 포함할 수 있다.
상기 테스트 클러스터를 실행하는 단계는 수행해야 할 테스트의 수를 기초로, 테스트 클러스터를 생성하고, 각 테스트 클러스터를 통해 하나의 테스트를 수행하도록 할 수 있다.
상기 테스트 클러스터를 실행하는 단계는
각 테스트 클러스터의 테스트의 세부 항목에 따라 상기 테스트의 실행에 필요한 만큼의 리소스를 할당할 수 있다.
상기 요청 수신 단계는 제2 사용자 단말기로부터 제2 테스트 수행 요청을 수신하고, 상기 테스트 클러스터를 실행하는 단계는 상기 제1 테스트 수행 요청과 대응되는 하나 이상의 제1 테스트 클러스터와는 별개로, 상기 제2 테스트 수행 요청에 포함된 하나 이상의 테스트를 수행할 수 있도록 하나 이상의 제2 테스트 클러스터를 생성하고, 각 테스트 클러스터가 실행될 수 있도록 리소스를 할당할 수 있다.
상기 테스트 클러스터를 실행하는 단계는 각 테스트 클러스터의 동작이 완료된 경우, 각 테스트 클러스터를 위한 리소스를 반환(return)하도록 제어할 수 있다.
본 발명의 실시예에 따른 컴퓨터 프로그램은 컴퓨터를 이용하여 본 발명의 실시예에 따른 테스트 실행 방법 중 어느 하나의 방법을 실행시키기 위하여 매체에 저장될 수 있다.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체가 더 제공된다.
전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해 질 것이다.
본 발명은 제1 사용자에 의해 등록된 하나 이상의 제1 테스트가 수행되는 동안, 제2 사용자에 의해 하나 이상의 제2 테스트가 등록된 경우, 제1 테스트를 수행하면서, 동시에 제2 테스트를 수행할 수 있다.
도 1은 본 발명의 실시예에 따른 배포 시스템을 나타내는 도면이다.
도 2은 본 발명의 실시예들에 따른 테스트 실행 장치의 구조를 나타내는 블록도이다.
도 3은 제어부의 구조를 나타내는 블록도이다.
도 4는 테스트 실행부의 구조를 나타내는 블록도이다.
도 5 내지 도 6은 본 발명의 실시예들에 따른 테스트 실행 방법을 설명하기 위한 흐름도이다.
도 7은 본 발명의 실시예들에 따른 테스트 실행 장치의 동작을 설명하기 위한 도면이다.
도 8은 테스트 실행 장치에 의해 생성된 작업의 일 예를 나타내는 도면이다.
도 9는 테스트 실행 장치에 의해 제공되는 사용자 인터페이스의 일 예를 나타내는 도면이다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
이하의 실시예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다.
이하의 실시예에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는한, 복수의 표현을 포함한다.
이하의 실시예에서, 포함하다 또는 가지다 등의 용어는 명세서 상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징을 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다.
어떤 실시예가 달리 구현 가능한 경우에 특정한 공정 순서는 설명되는 순서와 다르게 수행될 수도 있다. 예를 들어, 연속하여 설명되는 두 공정이 실질적으로 동시에 수행될 수도 있고, 설명되는 순서와 반대의 순서로 진행될 수 있다.
이하의 실시예에서, "회로"는, 예를 들어, 프로그램가능한 회로에 의해 실행되는 인스트럭션을 저장하는 하드와이어드 회로, 프로그램가능한 회로, 상태 머신 회로, 및/또는 펌웨어를 단독으로 또는 임의의 조합으로 포함할 수 있다. 애플리케이션은 호스트 프로세서 또는 다른 프로그램가능한 회로와 같은 프로그램가능한 회로 상에서 실행될 수 있는 코드 또는 인스트럭션으로서 구현될 수 있다. 본원의 임의의 실시예에서 사용되는 바와 같은, 모듈은, 회로로서 구현될 수 있다. 회로는 집적 회로 칩과 같은 집적 회로로서 구현될 수 있다.
이하의 실시예에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
여러 명의 개발자들이 함께 하나의 프로그램을 개발하는데 있어서는 소스 코드의 일관성 유지 뿐만 아니라 자동화된 통합을 위하여 자동 빌드, 자동 테스트의 기능을 제공하고 있다. 여기서, 자동 빌드는 소스 관리 시스템에 의해 관리되는 전체 소스를 자동적으로 빌드하는 과정, 자동 테스트는 소스 검증과 함께 기능/비기능 테스팅을 매번 자동적으로 검증하는 과정을 말한다. 이때, 자동 빌드 및 자동 테스트의 기능을 동시에 제공하는 서버가 있을 수 있는데, 상기 서버는 제한된 리소스를 가지고 있으므로, 동시에 제한된 수의 테스트 만을 진행할 수 있었다. 도 1은 본 발명의 실시예에 따른 배포 시스템(10)을 나타내는 도면이다.
도 1을 참조하면, 본 발명의 실시예에 따른 배포 시스템(10)은 테스트 실행 장치(100), 사용자 단말기(200), 배포 서버(300), 통신망(400)을 포함할 수 있다.
테스트 실행 장치(100)는 하나 이상의 개발자의 사용자 단말기(200)로부터 테스트 수행 요청을 수신하고, 상기 테스트 수행 요청에 포함된 하나 이상의 테스트를 수행하는 기능을 수행한다. 테스트 실행 장치(100)는 사용자 단말기(200)로부터 소정의 프로젝트에 포함되는 파일에 대한 수정 요청을 수신하고, 상기 수정 요청의 수정 파일, 수정 사항 등에 따라 수행해야 할 테스트의 항목을 결정하고, 수행해야 할 하나 이상의 테스트가 수행될 수 있도록 제어한다. 테스트 실행 장치(100)는 테스트 수행 결과, 테스트의 항목에 대한 결과(output)가 적절한 경우, 전체 소스 파일들을 컴파일하고, 빌드된 파일을 배포 서버(300)로 전송하는 기능을 수행할 수 있다.
사용자는 사용자 단말기(200)를 통해 테스트 실행 장치(100) 및/또는 배포 서버(300)에 접속할 수 있다. 사용자 단말기(200)는 테스트 실행 장치(100)로 테스트 수행 요청을 전송하고, 테스트 수행 요청에 대한 결과를 수신할 수 있다. 사용자 단말기(200)는 배포 서버(300)로 애플리케이션 다운로드 요청을 전송하고, 애플리케이션 다운로드 요청의 응답으로 빌드 파일을 수신할 수 있다.
복수 개의 사용자 단말기(200)들은 유무선 통신 환경에서 웹 서비스를 이용할 수 있는 통신 단말기를 의미한다. 여기서, 사용자 단말기(200)는 사용자의 퍼스널 컴퓨터(201)일 수도 있고, 또는 사용자의 휴대용 단말(202)일 수도 있다. 도 1에서는 휴대용 단말기(202)가 스마트폰으로 도시되었지만, 본 발명의 사상은 이에 제한되지 아니하며, 상술한 바와 같이 웹 브라우징이 가능한 애플리케이션을 탑재한 단말은 제한 없이 차용될 수 있다.
이를 더욱 상세히 설명하면, 사용자 단말기(200)는 컴퓨터(예를 들면, 데스크톱, 랩톱, 태블릿 등), 미디어 컴퓨팅 플랫폼(예를 들면, 케이블, 위성 셋톱박스, 디지털 비디오 레코더), 핸드헬드 컴퓨팅 디바이스(예를 들면, PDA, 이메일 클라이언트 등), 핸드폰의 임의의 형태, 또는 다른 종류의 컴퓨팅 또는 커뮤니케이션 플랫폼의 임의의 형태를 포함할 수 있으나, 본 발명이 이에 한정되는 것은 아니다.
한편, 통신망(400)은 복수 개의 사용자 단말기(200)들과 테스트 실행 장치(100) 또는 배포 서버(300)를 연결하는 역할을 수행한다. 즉, 통신망(400)은 사용자 단말기(200)들이 테스트 실행 장치(100) 또는 배포 서버(300)에 접속한 후 데이터를 송수신할 수 있도록 접속 경로를 제공하는 통신망을 의미한다. 통신망(400)은 예컨대 LANs(Local Area Networks), WANs(Wide Area Networks), MANs(Metropolitan Area Networks), ISDNs(Integrated Service Digital Networks) 등의 유선 네트워크나, 무선 LANs, CDMA, 블루투스, 위성 통신 등의 무선 네트워크를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.
도 2은 본 발명의 실시예들에 따른 테스트 실행 장치의 구조를 나타내는 블록도이다.
통신부(110)는 테스트 실행 장치(100)와 적어도 하나의 사용자 단말기(200) 간 또는 테스트 실행 장치(100)와 배포 서버(300)의 통신을 가능하게 하는 하나 이상의 구성요소를 포함할 수 있다.
여기서, 통신부(110)는 다른 네트워크 장치와 유무선 연결을 통해 제어 신호 또는 데이터 신호와 같은 신호를 송수신하기 위해 필요한 하드웨어 및 소프트웨어를 포함하는 장치일 수 있다.
제어부(120)는, 통상적으로 테스트 실행 장치(100)의 전반적인 동작을 제어한다. 예를 들어, 제어부(120)는, 데이터베이스(130)에 저장된 프로그램들을 실행함으로써, 통신부(110), 데이터베이스(130) 등을 전반적으로 제어할 수 있다.
여기서, 제어부(120)는 프로세서(processor)와 같이 데이터를 처리할 수 있는 모든 종류의 장치를 포함할 수 있다. 여기서, '프로세서(processor)'는, 예를 들어 프로그램 내에 포함된 코드 또는 명령으로 표현된 기능을 수행하기 위해 물리적으로 구조화된 회로를 갖는, 하드웨어에 내장된 데이터 처리 장치를 의미할 수 있다. 이와 같이 하드웨어에 내장된 데이터 처리 장치의 일 예로써, 마이크로프로세서(microprocessor), 중앙처리장치(central processing unit: CPU), 프로세서 코어(processor core), 멀티프로세서(multiprocessor), ASIC(application-specific integrated circuit), FPGA(field programmable gate array) 등의 처리 장치를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.
데이터베이스(130)는, 제어부(120)의 처리 및 제어를 위한 프로그램을 저장할 수도 있고, 입/출력되는 데이터들(예컨대, 복수의 메뉴, 복수의 메뉴 각각에 대응하는 복수의 제 1 계층 서브 메뉴, 복수의 제 1 계층 서브 메뉴 각각에 대응하는 복수의 제 2 계층 서브 메뉴 등)을 저장할 수도 있다.
또한, 데이터베이스(130)는 하나 이상의 프로젝트에 포함되는 하나 이상의 소스 파일을 저장 관리하는 기능을 수행할 수도 있다. 데이터베이스(130)는 각 소스 파일의 의존도(dependency) 관련 정보를 저장 관리 할 수 있다. 예를 들어, 제1 소스 파일이 제2 소스 파일에 포함된 경우, 데이터베이스(130)는 제2 소스 파일은 제1 소스 파일에 의존한다고 저장할 수 있다. 데이터베이스(130)는 각 프로젝트 및/또는 각 소스 파일에 대한 권한 정보를 저장 관리하는 기능을 수행할 수 있다. 데이터베이스(130)는 각 사용자의 업무 영역에 따라 부여된 각 소스 파일 별 쓰기 및/또는 읽기 권한에 대한 정보를 저장 관리 할 수 있다.
데이터베이스(130)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 테스트 실행 장치(100)는 인터넷(internet)상에서 데이터베이스(130)의 저장 기능을 수행하는 웹 스토리지(web storage) 또는 클라우드 서버를 운영할 수도 있다.
데이터베이스(130)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 예를 들어, UI 모듈, 터치 스크린 모듈, 알림 모듈 등으로 분류될 수 있다.
도 3은 제어부(120)의 구조를 나타내는 블록도이다.
도 3을 참조하면, 제어부(120)는 요청 수신부(121), 작업 생성부(122), 테스트 실행부(123)를 포함할 수 있다.
요청 수신부(121)는 사용자 단말기(200)로부터 테스트 수행 요청을 수신할 수 있다. 테스트 수행 요청은 테스트가 수행되는 환경과 관련된 정보인 환경 정보 및 소스 파일의 안정성을 테스트하기 위한 세부 항목을 포함할 수 있다. 예를 들어, 환경 정보는 테스트가 수행되는데 적합한 운영체제(Operating System)의 종류, 운영체제(OS)의 버전 정보 등을 포함할 수 있다. 다른 실시예에서, 요청 수신부(121)는 사용자 단말기(200)로부터 파일 수정 요청을 수신할 수 있다.
작업 생성부(122)는 상기 테스트 수행 요청과 대응하여, 상기 환경 정보로 상기 세부 항목을 수행하도록 하는 작업을 생성한다. 여기서, 상기 테스트 수행 요청과 대응되는 작업(work)은 미리 설정된 규칙 또는 규약에 따라 생성되는 객체로서, 상기 환경 정보로 상기 세부 항목을 각각 독립적으로 수행하도록 생성된다. 특히, 작업은 하나의 가상 서버로서 동작될 수 있도록 생성될 수 있다. 작업은 가상의 디스크, 또는 가상의 드라이브로서 동작되도록 생성될 수 있으며, 하드웨어, 운영 체제의 상위 계층의 플랫폼으로 생성될 수 있다. 이를 통해, 작업은 테스트 실행 장치(100)의 하드웨어, 리눅스 커널의 상위 계층의 동작과는 무관하게 실행되고, 무관한 프로세스 트리(스케쥴링), 파일 시스템, 네트워크 장치, IPC에 의해 제어될 수 있다. 특히, 작업은 독립적인 이미지, 클러스터들의 생성 및 관리 기능, 다양한 부가 기능을 제공하도록 생성될 수 있다.
작업 생성부(122)는 제1 사용자 단말기(201)로부터 수신한 제1 테스트 수행 요청과 대응하여, 제1 작업을 생성하고, 제2 사용자 단말기(202)로부터 수신한 제2 테스트 수행 요청과 대응하여 제2 작업을 생성할 수 있다. 제1 작업은 제1 테스트 수행 요청에 포함된 제1 환경 정보로 제1 세부 항목을 수행하도록 하는 객체이고, 제2 작업은 제2 테스트 수행 요청에 포함된 제2 환경 정보로 제2 세부 항목을 수행하도록 하는 객체일 수 있다. 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 작업을 생성하거나 작업을 해석하기 위한 데이터를 저장 관리 할 수 있다.
선택적 실시예에서, 작업 생성부(122)는 상기 파일 수정 요청에 포함된 소스 파일에 설정된 환경 정보 및 세부 항목을 고려하여, 상기 파일 수정 요청과 대응되는 작업(work)을 생성할 수 있다. 이때, 각 소스 파일에 대한 환경 정보 및 세부 항목은 데이터베이스(130)에 저장된 데이터를 참조하여 생성할 수 있다. 예를 들어, 작업 생성부(122)는 수정 파일에 대해서 의존도(dependency)를 가지고 있는 하나 이상의 소스 파일을 추출하고, 상기 하나 이상의 소스 파일의 동작을 테스트할 수 있는 세부 항목을 결정하게 된다. 각 소스 파일의 동작을 테스트할 수 있는 세부 항목은 각 소스 파일 별로 저장 관리 되며, 각 세부 항목에 따른 환경 정보도 저장 관리 될 수 있다.
선택적 실시예에서, 작업 생성부(122)는 작업을 생성하는데 있어서, 환경 정보 및 세부 항목을 고려하여, 먼저 수행되어야 하는 테스트 항목을 포함하고 있는 경우에는, 이를 고려하여 테스트 순서를 결정할 수 있다. 예를 들어, 제1 세부 항목의 결과를 이용하여 제2 세부 항목을 수행해야 하는 경우, 제1 세부 항목 이후에 제2 세부 항목이 수행될 수 있도록 작업이 생성될 수 있다.
테스트 실행부(123)는 상기 테스트 수행 요청, 즉, 환경 정보 및 세부 항목과 대응되는 작업에 따라 테스트 수행 요청에 포함된 하나 이상의 세부 항목이 병렬적으로 수행될 수 있도록 제어한다. 또한, 테스트 실행부(123)는 제1 작업에 따라 수행되어야 하는 하나 이상의 제1 세부 항목 및 제2 작업에 따라 수행되어야 하는 하나 이상의 제2 세부 항목이 병렬적으로 수행될 수 있도록 제어한다. 여기서, 병렬적으로 수행된다는 것은 제1 세부 항목 및 제2 세부 항목이 동시에 수행되는 것을 포함하며, 동일한 실행 속도로 실행되지 않더라도 제1 세부 항목 또는 제2 세부 항목의 정지, 멈춤 없이 실행되는 것을 포함할 수 있다. 특히, 세부 항목들 사이의 관련성이 없는 경우에는 세부 항목들은 병렬적으로 수행될 수 있지만, 세부 항목들 사이에 관련된 경우에는 세부 항목들은 순차적으로 수행될 수 있다. 테스트 실행부(123)는 하나 이상의 사용자 단말기(200)로부터 수신한 테스트 수행 요청에 따른 하나 이상의 테스트가 동시에 병렬적으로 수행될 수 있도록 제어한다. 테스트 실행부(123)는 복수의 테스트 클러스터들의 환경 정보가 서로 상이하더라도, 병렬적으로 실행될 수 있도록 제어할 수 있다. 각 테스트 클러스터는 서로 영향을 주지 않도록 제어될 수 있다.
또한, 테스트 실행부(123)는 테스트 클러스터를 이미지 파일(virtual image file)로서 생성할 수 있다. 여기서, 이미지 파일(image file)은 하나의 시스템, 장치, 서버 등에 일부인 파일이고, 압축 프로그램을 이용하여 압축을 해제한 경우, 상기 시스템, 장치, 서버와는 별도의 저장 공간처럼 동작될 수 있다. 이미지 파일(image file)은 압축을 해제 하면 가상의 드라이브(virtual drive)로 생성될 수 있고, 시스템, 장치, 서버 안에 마운트(mount)되어 접근할 수 있다.
선택적 실시예에서, 테스트 실행부(123)는 상기 작업에 포함된 수행되어야 하는 하나 이상의 테스트와 대응하여, 하나 이상의 테스트 클러스터를 생성하고, 상기 하나 이상의 테스트 클러스터를 병렬적으로 수행하도록 제어한다. 여기서, 테스트 클러스터는 상기 작업에 포함된 수행되어야 하는 테스트의 수와 비례하여 생성된다. 생성된 테스트 클러스터는 독립적인 저장 영역에 생성되어 서로 영향을 미치지 않는다. 예를 들어, 하나의 작업에 포함된 제1 테스트 클러스터 및 제2 테스트 클러스터는 제1 시점부터 실행되기 시작하고, 하나의 작업의 종료 시간은 포함된 제1 테스트 클러스터 또는 제2 테스트 클러스터의 종료 시간과 일치할 수 있다. 즉, 하나의 작업의 종료 시간은 늦게 종료되는 테스트 클러스터의 종료 시간과 일치하게 된다. 결과적으로, 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 순차적으로 실행되는 경우보다 훨씬 더 적은 시간으로 더 많은 테스트를 실행할 수 있다. 물론, 각 테스트 클러스터의 실행 시간은 동시에 실행되는 테스트 클러스터의 수에 따라 달라질 수 있다. 예를 들어, 동시에 실행되는 테스트 클러스터의 수가 3개인 경우 보다 동시에 실행되는 테스트 클러스터의 수가 6개인 경우에 테스트 실행 시간이 더 길 수 있다.
선택적 실시예에서, 테스트 실행부(123)는 제1 작업에 포함된 하나 이상의 테스트가 수행될 수 있도록, 상기 테스트의 수만큼의 하나 이상의 제1 테스트 클러스터를 생성하고, 제2 작업에 포함된 하나 이상의 테스트가 수행될 수 있도록, 상기 테스트의 수만큼의 하나 이상의 제2 테스트 클러스터를 생성하고, 상기 하나 이상의 제1 테스트 클러스터 및 상기 하나 이상의 제2 테스트 클러스터가 동시에 독립적으로 수행될 수 있도록 제어한다.
선택적 실시에에서, 테스트 실행부(123)는 제1 사용자 단말기(201)로부터 수신한 요청에 따라 제1 작업에 포함된 하나 이상의 테스트가 수행되는 동안, 제2 사용자 단말기(202)로부터 수신한 제2 테스트 수행 요청에 따라 제2 작업에 포함된 하나 이상의 테스트를 수행할 수 있도록, 제2 작업에 포함된 테스트의 수만큼의 테스트 클러스터를 생성하고, 각 테스트 클러스터가 각 테스트를 수행하도록 제어한다.
선택적 실시예에서, 테스트 실행부(123)는 생성된 하나 이상의 테스트 클러스터가 동시에 독립적으로 수행될 수 있도록 테스트 수행을 위한 리소스를 분배하는 기능을 수행할 수 있다. 테스트 실행부(123)는 각 테스트 클러스터가 수행해야 하는 테스트의 종류, 항목, 포함하는 태스트(task)의 수 등을 고려하여, 각 테스트 클러스터를 위한 리소스의 크기를 결정할 수 있다. 여기서, 각 테스트 클러스터를 위한 리소스는 플래시 메모리(flash memory), 중앙 처리 장치(CPU) 중 적어도 하나를 할당할 수 있다.
예를 들어, 테스트 실행부(123)는 미리 설정된 임계 크기 이상의 메모리를 필요로 하는 제1 테스트 및 그렇지 않은 제2 테스트를 분류하고, 제1 테스트를 위해서는 제1 크기의 메모리를 할당하고, 제2 테스트를 위해서는 제1 크기보다 현저히 작은 제2 크기의 메모리(또는 CPU 등)를 할당할 수 있다. 이를 통해, 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 하나의 작업에 포함된 하나 이상의 테스트가 동시에 종료될 수 있도록 제어할 수 있고, 하나의 작업을 수행하는 시간을 좀더 단축할 수 있다.
또한, 테스트 실행부(123)는 테스트 수행 요청에 포함된 사용자 정보를 고려하여, 테스트를 위한 리소스를 할당할 수 있다. 예를 들어, 좀더 높은 권한을 가지는 제1 사용자 단말기(201)로부터 수신한 제1 테스트 수행 요청과 대응하는 테스트 클러스터를 위한 리소스는 상기 제1 사용자 보다 낮은 권한을 가지는 제2 사용자 단말기(202)로부터 수신한 제2 테스트 수행 요청과 대응하는 테스트 클러스터를 위한 리소스 보다 크거나 많을 수 있다. 이를 통해, 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 좀더 높은 권한을 가지는 사용자가 요청한 테스트 수행 요청에 대한 결과를 더 빨리 생성하도록 할 수 있다.
도 4에 도시된 바와 같이, 테스트 실행부(123)는 클러스터 관리부(1231), 스케쥴링 수행부(1232)를 포함할 수 있다.
클러스터 관리부(1231)는 생성한 작업과 대응하여, 하나의 테스트 클러스터가 복수의 태스크(task)를 포함하도록 할 수 있다. 또한, 클러스터 관리부(1231)는 각 테스트 클러스터에 포함된 복수의 태스크의 성격, 속성에 따라 복수의 태스크의 실행 순서를 결정할 수 있다. 예를 들어, 클러스터 관리부(1231)는 서로 선후 관계가 없는 태스트들은 동시에 실행되도록 제어하고, 제1 태스크의 실행 후에 제2 태스크가 실행되어야 하는 경우, 제1 태스크 후에 제2 태스크가 실행되도록 각 태스크의 실행 순서를 결정할 수 있다.
또한, 클러스터 관리부(1231)는 생성된 복수의 테스트 클러스터들이 하나의 중앙 처리 소자, 또는 중앙 처리 장치(CPU) 또는 복수의 중앙 처리 소자 또는 중앙 처리 장치를 공유할 수 있도록 제어할 수 있다. 이를 위해서, 본 발명의 실시예들에 따른 제어부(120)는 테스트 실행 장치(100)가 포함하고 있는 리소스를 병렬적 또는 분산적으로 할당하도록 제어할 수 있다. 제어부(120)는 하나 또는 복수의 프로세서를 포함할 수 있다. 클러스터 관리부(1231)에 의한 리소스 할당을 위해서 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 분산 처리 기술(Distributed processing)을 활용할 수 있다.
스케쥴링 수행부(1232)는 클러스터 관리부(1231)에 의해 설정된 실행 순서에 따라 하나 이상의 테스트 클러스터가 실행될 수 있도록 제어한다. 또한, 스케쥴링 수행부(1232)는 제1 테스트 클러스터 및 제2 테스트 클러스터가 병렬적으로 수행될 수 있도록 제어한다.
물론, 가상으로 생성된 작업 또는 테스트 클러스터들은 실행이 종료되는 시점에 함께 삭제될 수 있다. 삭제된다는 것은 작업 또는 테스트 클러스터에게 할당된 리소스가 다시 자유 상태가 되며, 작업 또는 테스트 클러스터에게 할당된 메모리가 다시 자유 상태가 됨을 의미할 수 있다. 자유 상태가 된 리소스, 메모리 등은 다시 새롭게 생성된 작업 또는 테스트 클러스터에게 할당될 수 있다.
도 5 내지 도 6은 본 발명의 실시예들에 따른 테스트 실행 방법을 설명하기 위한 흐름도이다.
도 5을 참조하면, 본 발명의 실시예들에 따른 테스트 실행 방법은 테스트 수행 요청을 수신하는 단계(S110), 작업을 생성하는 단계(S120), 테스트 클러스터를 생성하는 단계(S130), 클러스터를 실행하는 단계(S140)를 포함할 수 있다.
S110에서는 테스트 실행 장치(100)는 사용자 단말기(200)로부터 테스트 수행 요청을 수신할 수 있다. 테스트 수행 요청은 테스트가 수행되는 환경과 관련된 정보인 환경 정보 및 소스 파일의 안정성을 테스트하기 위한 세부 항목을 포함할 수 있다. 예를 들어, 환경 정보는 테스트가 수행되는데 적합한 운영체제(Operating System)의 종류, 운영체제(OS)의 버전 정보를 포함할 수 있다.
S120에서는 테스트 실행 장치(100)는 상기 테스트 수행 요청과 대응하여, 상기 환경 정보로 상기 세부 항목을 수행하도록 하는 작업을 생성한다. 여기서, 상기 테스트 수행 요청과 대응되는 작업(work)은 미리 설정된 규칙 또는 규약에 따라 생성되는 객체로서, 상기 환경 정보로 상기 세부 항목을 수행하도록 생성된다. 테스트 실행 장치(100)는 제1 사용자 단말기(201)로부터 수신한 제1 테스트 수행 요청과 대응하여, 제1 작업을 생성하고, 제2 사용자 단말기(202)로부터 수신한 제2 테스트 수행 요청과 대응하여 제2 작업을 생성할 수 있다. 제1 작업은 제1 테스트 수행 요청에 포함된 제1 환경 정보로 제1 세부 항목을 수행하도록 하는 객체이고, 제2 작업은 제2 테스트 수행 요청에 포함된 제2 환경 정보로 제2 세부 항목을 수행하도록 하는 객체일 수 있다. 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 작업을 생성하거나 작업을 해석하기 위한 데이터를 저장 관리 할 수 있다.
S130에서는 테스트 실행 장치(100)는 상기 작업에 포함된 수행되어야 하는 하나 이상의 테스트와 대응하여, 하나 이상의 테스트 클러스터를 생성할 수 있다. 여기서, 테스트 클러스터는 상기 작업에 포함된 수행되어야 하는 테스트의 수와 비례하여 생성된다. 생성된 테스트 클러스터는 독립적인 저장 영역에 생성되어 서로 영향을 미치지 않는다. 테스트 실행 장치(100)는 복수의 테스트 클러스터들의 환경 정보가 서로 상이하더라도, 병렬적으로 실행될 수 있도록 제어할 수 있다. 각 테스트 클러스터는 서로 영향을 주지 않도록 제어될 수 있다.
선택적 실시예에서, 테스트 실행 장치(100)는 제1 작업에 포함된 하나 이상의 테스트가 수행될 수 있도록, 상기 테스트의 수만큼의 하나 이상의 제1 테스트 클러스터를 생성하고, 제2 작업에 포함된 하나 이상의 테스트가 수행될 수 있도록, 상기 테스트의 수만큼의 하나 이상의 제2 테스트 클러스터를 생성할 수 있다.
선택적 실시에에서, 테스트 실행 장치(100)는 제1 사용자 단말기(201)로부터 수신한 요청에 따라 제1 작업에 포함된 하나 이상의 테스트가 수행되는 동안, 제2 사용자 단말기(202)로부터 수신한 제2 테스트 수행 요청에 따라 제2 작업에 포함된 하나 이상의 테스트를 수행할 수 있도록, 제2 작업에 포함된 테스트의 수만큼의 테스트 클러스터를 생성할 수 있다. 또한, 테스트 실행 장치(100)는 테스트 클러스터를 이미지 파일(virtual image file)로서 생성할 수 있다. 여기서, 이미지 파일(image file)은 하나의 시스템, 장치, 서버 등에 일부인 파일이고, 압축 프로그램을 이용하여 압축을 해제한 경우, 상기 시스템, 장치, 서버와는 별도의 저장 공간처럼 동작될 수 있다. 이미지 파일(image file)은 압축을 해제 하면 가상의 드라이브(virtual drive)로 생성될 수 있고, 시스템, 장치, 서버 안에 마운트(mount)되어 접근할 수 있다.
S140에서는 테스트 실행 장치(100)는 상기 테스트 수행 요청과 대응되는 작업에 따라 테스트 수행 요청에 포함된 하나 이상의 세부 항목이 병렬적으로 수행될 수 있도록 제어한다. 또한, 테스트 실행 장치(100)는 제1 작업에 따라 수행되어야 하는 하나 이상의 제1 세부 항목 및 제2 작업에 따라 수행되어야 하는 하나 이상의 제2 세부 항목이 병렬적으로 수행될 수 있도록 제어한다. 테스트 실행 장치(100)는 하나 이상의 사용자 단말기(200)로부터 수신한 테스트 수행 요청에 따른 하나 이상의 테스트가 동시에 병렬적으로 수행될 수 있도록 제어한다.
선택적 실시예에서, 테스트 실행 장치(100)는 생성된 하나 이상의 테스트 클러스터가 동시에 독립적으로 수행될 수 있도록 테스트 수행을 위한 리소스를 분배하는 기능을 수행할 수 있다. 테스트 실행 장치(100)는 각 테스트 클러스터가 수행해야 하는 테스트의 종류, 항목, 포함하는 태스트(task)의 수 등을 고려하여, 각 테스트 클러스터를 위한 리소스의 크기를 결정할 수 있다. 여기서, 각 테스트 클러스터를 위한 리소스는 플래시 메모리(flash memory), 중앙 처리 장치(CPU) 중 적어도 하나를 할당할 수 있다.
예를 들어, 테스트 실행 장치(100)는 미리 설정된 임계 크기 이상의 메모리를 필요로 하는 제1 테스트 및 그렇지 않은 제2 테스트를 분류하고, 제1 테스트를 위해서는 제1 크기의 메모리를 할당하고, 제2 테스트를 위해서는 제1 크기보다 현저히 작은 제2 크기의 메모리(또는 CPU 등)를 할당할 수 있다.
또한, 테스트 실행 장치(100)는 테스트 수행 요청에 포함된 사용자 정보를 고려하여, 테스트 클러스터를 위한 리소스를 할당할 수 있다. 예를 들어, 좀더 높은 권한을 가지는 제1 사용자 단말기(201)로부터 수신한 제1 테스트 수행 요청과 대응하는 테스트 클러스터를 위한 리소스는 상기 제1 사용자 보다 낮은 권한을 가지는 제2 사용자 단말기(202)로부터 수신한 제2 테스트 수행 요청과 대응하는 테스트 클러스터를 위한 리소스 보다 크거나 많을 수 있다.
추가적으로, 본 발명의 실시예들에 따른 테스트 실행 방법은 테스트 결과에 따라 바이너리를 배포 하는 단계 또는 테스트 결과를 사용자 단말기로 전송하는 단계를 더 포함할 수 있다.
테스트 결과에 따라 바이너리를 배포하는 단계에서는 테스트 실행 장치(100)는 테스트 결과, 세부 항목(테스트 항목)을 모두 완수(complete)한 경우, 해당 프로젝트의 소스 파일을 전체 컴파일하여 바이너리 파일을 생성하고, 생성된 바이너리 파일을 배포 서버(300)로 전송할 수 있다. 테스트 실행 장치(100)는 테스트 결과, 세부 항목(테스트 항목)을 모두 통과(pass)하지 못한 경우는 해당 프로젝트의 소스 파일에 적용된 수정 파일, 사항 등을 적용하지 않고 롤백(rollback)하는 기능을 제공할 수 있다.
도 6을 참조하면, 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 소스 수정 요청을 수신하는 단계(S210), 테스트 항목을 결정하는 단계(S220), 작업 생성 단계(S230), 테스트 클러스터를 생성하는 단계(S240), 실행 단계(S250)를 포함할 수 있다.
S210에서는 테스트 실행 장치(100)는 사용자 단말기(200)로부터 소스 수정 요청을 수신할 수 있다. 테스트 실행 장치(100)는 사용자 단말기(200)로부터 수신된 테스트를 수행하는 기능 뿐만 아니라 복수의 사용자 단말기들을 연결하여, 하나의 프로젝트(애플리케이션, 게임, 프로그램, 소프트웨어)가 개발될 수 있는 기능을 수행할 수도 있다. 테스트 실행 장치(100)는 프로젝트 별 소스 파일을 관리하고, 각 소스 파일에 대한 수정 사항이 저장 관리되는 기능을 수행할 수 있다. 여기서, 소스 수정 요청은 수정하고자 하는 소스 파일의 이름, 수정 사항, 수정에 대한 코멘트(comment)를 포함할 수 있다.
S220에서는 테스트 실행 장치(100)는 상기 소스 수정 요청에 포함된 소스 파일에 대한 테스트 항목을 결정할 수 있다. 이때, 테스트 실행 장치(100)는 미리 저장된 소스 파일에 대한 관련 데이터를 활용할 수 있다. 테스트 실행 장치(100)는 소스 수정 요청에 포함된 소스 파일 뿐만 아니라 소스 파일에 대한 의존도가 있는 소스 파일을 포함하는 소스 파일의 그룹을 추출하고, 각 소스 파일의 테스트 항목을 추출할 수 있다.
S230에서는 테스트 실행 장치(100)는 상기 테스트 항목에 대한 테스트를 실행하도록 하는 작업을 생성할 수 있다. 여기서, 작업은 각 소스 파일에 대한 테스트 항목을 포함하여 생성될 수 있다. 테스트 실행 장치(100)는 제1 사용자 단말기(201)로부터 수신한 제1 소스 수정 요청과 대응하여, 제1 작업을 생성하고, 제2 사용자 단말기(202)로부터 수신한 제2 소스 수정 요청과 대응하여 제2 작업을 생성할 수 있다.
S240에서는 테스트 실행 장치(100)는 상기 작업에 포함된 하나 이상의 테스트가 수행될 수 있도록 하나 이상의 테스트 클러스터를 생성할 수 있다. 여기서, 테스트 클러스터는 상기 작업에 포함된 수행되어야 하는 테스트의 수와 비례하여 생성된다. 생성된 테스트 클러스터는 독립적인 저장 영역에 생성되어 서로 영향을 미치지 않는다. 테스트 실행 장치(100)는 복수의 테스트 클러스터들의 환경 정보가 서로 상이하더라도, 병렬적으로 실행될 수 있도록 제어할 수 있다. 각 테스트 클러스터는 서로 영향을 주지 않도록 제어될 수 있다. 테스트 실행 장치(100)는 테스트 클러스터를 이미지 파일(virtual image file)로서 생성할 수 있다. 여기서, 이미지 파일(image file)은 하나의 시스템, 장치, 서버 등에 일부인 파일이고, 압축 프로그램을 이용하여 압축을 해제한 경우, 상기 시스템, 장치, 서버와는 별도의 저장 공간처럼 동작될 수 있다. 이미지 파일(image file)은 압축을 해제 하면 가상의 드라이브(virtual drive)로 생성될 수 있고, 시스템, 장치, 서버 안에 마운트(mount)되어 접근할 수 있다.
S250에서는 테스트 실행 장치(100)는 테스트 실행 장치(100)는 상기 테스트 수행 요청과 대응되는 작업에 따라 테스트 수행 요청에 포함된 하나 이상의 세부 항목이 병렬적으로 수행될 수 있도록 제어한다. 또한, 테스트 실행 장치(100)는 제1 작업에 따라 수행되어야 하는 하나 이상의 제1 세부 항목 및 제2 작업에 따라 수행되어야 하는 하나 이상의 제2 세부 항목이 병렬적으로 수행될 수 있도록 제어한다. 테스트 실행 장치(100)는 하나 이상의 사용자 단말기(200)로부터 수신한 테스트 수행 요청에 따른 하나 이상의 테스트가 동시에 병렬적으로 수행될 수 있도록 제어한다.
선택적 실시예에서, 테스트 실행 장치(100)는 생성된 하나 이상의 테스트 클러스터가 동시에 독립적으로 수행될 수 있도록 테스트 수행을 위한 리소스를 분배하는 기능을 수행할 수 있다. 테스트 실행 장치(100)는 각 테스트 클러스터가 수행해야 하는 테스트의 종류, 항목, 포함하는 태스트(task)의 수 등을 고려하여, 각 테스트 클러스터를 위한 리소스의 크기를 결정할 수 있다. 여기서, 각 테스트 클러스터를 위한 리소스는 플래시 메모리(flash memory), 중앙 처리 장치(CPU) 중 적어도 하나를 할당할 수 있다.
예를 들어, 테스트 실행 장치(100)는 미리 설정된 임계 크기 이상의 메모리를 필요로 하는 제1 테스트 및 그렇지 않은 제2 테스트를 분류하고, 제1 테스트를 위해서는 제1 크기의 메모리를 할당하고, 제2 테스트를 위해서는 제1 크기보다 현저히 작은 제2 크기의 메모리(또는 CPU 등)를 할당할 수 있다.
또한, 테스트 실행 장치(100)는 테스트 수행 요청에 포함된 사용자 정보를 고려하여, 테스트 클러스터를 위한 리소스를 할당할 수 있다. 예를 들어, 좀더 높은 권한을 가지는 제1 사용자 단말기(201)로부터 수신한 제1 테스트 수행 요청과 대응하는 테스트 클러스터를 위한 리소스는 상기 제1 사용자 보다 낮은 권한을 가지는 제2 사용자 단말기(202)로부터 수신한 제2 테스트 수행 요청과 대응하는 테스트 클러스터를 위한 리소스 보다 크거나 많을 수 있다.
추가적으로, 본 발명의 실시예들에 따른 테스트 실행 방법은 테스트 결과에 따라 바이너리를 배포 하는 단계 또는 테스트 결과를 사용자 단말기로 전송하는 단계를 더 포함할 수 있다.
테스트 결과에 따라 바이너리를 배포하는 단계에서는 테스트 실행 장치(100)는 테스트 결과, 세부 항목(테스트 항목)을 모두 완수(complete)한 경우, 해당 프로젝트의 소스 파일을 전체 컴파일하여 바이너리 파일을 생성하고, 생성된 바이너리 파일을 배포 서버(300)로 전송할 수 있다. 테스트 실행 장치(100)는 테스트 결과, 세부 항목(테스트 항목)을 모두 통과(pass)하지 못한 경우는 해당 프로젝트의 소스 파일에 적용된 수정 파일, 사항 등을 적용하지 않고 롤백(rollback)하는 기능을 제공할 수 있다.
도 7은 본 발명의 실시예들에 따른 테스트 실행 장치의 동작을 설명하기 위한 도면이다.
도 7를 참조하면, 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 프로젝트 별로 소스 파일을 저장 관리하는 데이터베이스(701), 데이터베이스에 접근한, 소스 파일의 수정 요청을 감시하는 수정 감시부(702), 소스 파일에 대한 수정 요청을 선입선출로 처리하는 작업 큐(703)를 포함할 수 있다. 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 작업 큐에 포함된 제1 수정 요청과 대응하는 작업을 생성하는 작업 생성부(704)를 더 포함할 수 있다. 테스트 실행 장치(100)는 생성된 작업에 따라 테스트를 실행하는 테스트 실행부(705)를 더 포함할 수 있다. 최종적으로, 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 수행해야 할 테스트의 수 만큼의 테스트 클러스터들을 생성하게 된다. 생성된 테스트 클러스터들(706)은 각각 독립적으로 병렬적으로 수행되게 된다.
도 8은 테스트 실행 장치에 의해 생성된 작업의 일 예를 나타내는 도면이다.
본 발명의 실시예들에 따른 테스트 실행 장치(100)에 의해 생성된 작업은 각 테스트 수행 요청과 대응하여, 하나 이상의 테스트 항목(세부 항목)을 포함할 수 있다. 본 발명의 실시예들에 따른 테스트 실행 장치(100)는 도 8과 같이, 5개의 세부 항목을 포함하는 작업을 생성할 수 있다. 각 세부 항목(테스트 항목)은 생성해야 할 테스트 클러스터의 이름(801), 테스트 클러스터가 실행되어야 하는 이미지 파일(802), 명령어 정보(803) 네트워크 정보(804), 크기 정보, 또는 저장 위치 정보(805)를 포함할 수 있다. 작업 및 테스트 클러스터는 개발자에 의해 입력된 테스트 정보를 기초로 생성되며, 생성된 규칙에 따라 실행되게 된다.
도 9는 테스트 실행 장치에 의해 제공되는 사용자 인터페이스의 일 예를 나타내는 도면이다.
테스트 실행 장치(100)는 사용자 단말기(200)로 테스트 수행 요청을 입력하는 화면을 제공할 수 있다. 테스트 수행 요청을 입력하는 화면은 제목 입력 영역(903), 및 테스트할 세부 항목을 입력하는 영역(904)를 포함하는 입력 영역(902) 및 편집 화면을 이동시킬 수 있는 카테고리 정보 표시 영역(901)를 포함할 수 있다.
이상 설명된 본 발명에 따른 실시예는 컴퓨터 상에서 다양한 구성요소를 통하여 실행될 수 있는 컴퓨터 프로그램의 형태로 구현될 수 있으며, 이와 같은 컴퓨터 프로그램은 컴퓨터로 판독 가능한 매체에 기록될 수 있다. 이때, 매체는 컴퓨터로 실행 가능한 프로그램을 계속 저장하거나, 실행 또는 다운로드를 위해 임시 저장하는 것일 수도 있다. 또한, 매체는 단일 또는 수개 하드웨어가 결합된 형태의 다양한 기록수단 또는 저장수단일 수 있는데, 어떤 컴퓨터 시스템에 직접 접속되는 매체에 한정되지 않고, 네트워크 상에 분산 존재하는 것일 수도 있다. 매체의 예시로는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등을 포함하여 프로그램 명령어가 저장되도록 구성된 것이 있을 수 있다. 또한, 다른 매체의 예시로, 애플리케이션을 유통하는 앱 스토어나 기타 다양한 소프트웨어를 공급 내지 유통하는 사이트, 서버 등에서 관리하는 기록매체 내지 저장매체도 들 수 있다.
한편, 상기 컴퓨터 프로그램은 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 프로그램의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함될 수 있다.
본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, "필수적인", "중요하게" 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.
본 발명의 명세서(특히 특허청구범위에서)에서 "상기"의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.
10: 배포 시스템
100: 테스트 실행 장치
200: 사용자 단말기
300: 배포 서버
400: 통신망

Claims (11)

  1. 제1 테스트 수행 요청을 수신하는 요청 수신부;
    상기 제1 테스트 수행 요청에 포함된 테스트의 환경 및 세부 항목을 추출하고, 상기 환경으로 상기 세부 항목을 수행하도록 하는 작업(Work)을 생성하는 작업 생성부;
    상기 생성한 작업에 따라 테스트가 수행될 수 있도록 테스트 클러스터를 생성하고, 각 테스트 클러스터를 병렬적으로 실행하도록 제어하는 테스트 실행부;를 포함하고,
    상기 작업은
    제1 작업 및 제2 작업을 포함하고,
    상기 세부 항목은
    상기 제1 작업에 따라 수행되어야 하는 하나 이상의 제1 세부 항목 및 상기 제2 작업에 따라 수행되어야 하는 하나 이상의 제2 세부 항목을 포함하고,
    상기 테스트 실행부는
    상기 제1 세부 항목 및 상기 제2 세부 항목을 정지 및 멈춤 없이 동시에 실행하도록 제어하는, 테스트 실행 장치.
  2. 제1항에 있어서,
    상기 테스트 실행부는
    수행해야 할 테스트의 수를 기초로, 테스트 클러스터(test cluster)를 생성하고, 각 테스트 클러스터를 통해 하나의 테스트를 수행하도록 하는, 테스트 실행 장치.
  3. 제1항에 있어서,
    상기 테스트 실행부는
    각 테스트 클러스터의 테스트의 세부 항목에 따라 상기 테스트의 실행에 필요한 만큼의 리소스를 할당하는, 테스트 실행 장치.
  4. 제1항에 있어서,
    상기 요청 수신부는
    제2 사용자 단말기로부터 제2 테스트 수행 요청을 수신하고,
    상기 테스트 실행부는
    상기 제1 테스트 수행 요청과 대응되는 하나 이상의 제1 테스트 클러스터와는 별개로, 상기 제2 테스트 수행 요청에 포함된 하나 이상의 테스트를 수행할 수 있도록 하나 이상의 제2 테스트 클러스터를 생성하고, 각 테스트 클러스터가 실행될 수 있도록 리소스를 할당하는, 테스트 실행 장치.
  5. 제4항에 있어서,
    상기 테스트 실행부는
    각 테스트 클러스터의 동작이 완료된 경우, 각 테스트 클러스터를 위한 리소스를 반환(return)하도록 제어하는, 테스트 실행 장치.
  6. 테스트 실행 장치가 제1 사용자 단말기로부터 제1 테스트 수행 요청을 수신하는 단계;
    상기 제1 테스트 수행 요청에 포함된 테스트의 환경 및 세부 항목을 추출하고, 상기 환경으로 상기 세부 항목을 수행하도록 하는 작업을 생성하는 단계;
    상기 생성한 작업에 따라 테스트가 수행될 수 있도록 테스트 클러스터를 생성하고, 각 테스트 클러스터를 병렬적으로 실행하도록 제어하는 단계;를 포함하고,
    상기 작업은
    제1 작업 및 제2 작업을 포함하고,
    상기 세부 항목은
    상기 제1 작업에 따라 수행되어야 하는 하나 이상의 제1 세부 항목 및 상기 제2 작업에 따라 수행되어야 하는 하나 이상의 제2 세부 항목을 포함하고,
    상기 제어하는 단계는
    상기 제1 세부 항목 및 상기 제2 세부 항목을 정지 및 멈춤 없이 동시에 실행하도록 제어하는, 테스트 실행 방법.
  7. 제6항에 있어서,
    상기 테스트 클러스터를 실행하는 단계는
    수행해야 할 테스트의 수를 기초로, 테스트 클러스터를 생성하고, 각 테스트 클러스터를 통해 하나의 테스트를 수행하도록 하는, 테스트 실행 방법.
  8. 제6항에 있어서,
    상기 테스트 클러스터를 실행하는 단계는
    각 테스트 클러스터의 테스트의 세부 항목에 따라 상기 테스트의 실행에 필요한 만큼의 리소스를 할당하는, 테스트 실행 방법.
  9. 제6항에 있어서,
    상기 요청 수신 단계는
    제2 사용자 단말기로부터 제2 테스트 수행 요청을 수신하고,
    상기 테스트 클러스터를 실행하는 단계는
    상기 제1 테스트 수행 요청과 대응되는 하나 이상의 제1 테스트 클러스터와는 별개로, 상기 제2 테스트 수행 요청에 포함된 하나 이상의 테스트를 수행할 수 있도록 하나 이상의 제2 테스트 클러스터를 생성하고, 각 테스트 클러스터가 실행될 수 있도록 리소스를 할당하는, 테스트 실행 방법.
  10. 제9항에 있어서,
    상기 테스트 클러스터를 실행하는 단계는
    각 테스트 클러스터의 동작이 완료된 경우, 각 테스트 클러스터를 위한 리소스를 반환(return)하도록 제어하는, 테스트 실행 방법.
  11. 컴퓨터를 이용하여 제6항 내지 제10항 중 어느 한 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
KR1020160015665A 2016-02-11 2016-02-11 테스트 실행 장치, 방법 및 컴퓨터 프로그램 KR101751515B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160015665A KR101751515B1 (ko) 2016-02-11 2016-02-11 테스트 실행 장치, 방법 및 컴퓨터 프로그램

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160015665A KR101751515B1 (ko) 2016-02-11 2016-02-11 테스트 실행 장치, 방법 및 컴퓨터 프로그램

Publications (1)

Publication Number Publication Date
KR101751515B1 true KR101751515B1 (ko) 2017-06-27

Family

ID=59514415

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160015665A KR101751515B1 (ko) 2016-02-11 2016-02-11 테스트 실행 장치, 방법 및 컴퓨터 프로그램

Country Status (1)

Country Link
KR (1) KR101751515B1 (ko)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190051436A (ko) * 2017-11-07 2019-05-15 엔에이치엔 주식회사 어플리케이션 사용환경 설정방법 및 이를 이용한 테스트방법
KR20200138919A (ko) * 2019-06-03 2020-12-11 넷마블 주식회사 게임 내 밸런스 테스트를 수행하기 위한 컴퓨터 프로그램
KR20210013812A (ko) * 2019-07-29 2021-02-08 넷마블 주식회사 게임 테스트 방법
CN113535560A (zh) * 2021-07-14 2021-10-22 杭州网易云音乐科技有限公司 测试执行方法、装置、存储介质和计算设备
KR20220119945A (ko) * 2021-02-22 2022-08-30 주식회사 슈퍼크리에이티브 턴제 대전게임 캐릭터 개발을 위한 밸런스 분석 시스템
WO2023043189A1 (ko) * 2021-09-14 2023-03-23 엘지이노텍 주식회사 시뮬레이션 제공 장치 및 시뮬레이션 제공 방법
CN116645263A (zh) * 2023-07-25 2023-08-25 深流微智能科技(深圳)有限公司 一种图形处理单元

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009519544A (ja) * 2005-12-12 2009-05-14 アーカイブス，インク． 自動ソフトウェアテストフレームワーク
JP2013089057A (ja) * 2011-10-19 2013-05-13 Hitachi Ltd モデル検査支援方法、モデル検査支援プログラム、およびモデル検査支援装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009519544A (ja) * 2005-12-12 2009-05-14 アーカイブス，インク． 自動ソフトウェアテストフレームワーク
JP2013089057A (ja) * 2011-10-19 2013-05-13 Hitachi Ltd モデル検査支援方法、モデル検査支援プログラム、およびモデル検査支援装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190051436A (ko) * 2017-11-07 2019-05-15 엔에이치엔 주식회사 어플리케이션 사용환경 설정방법 및 이를 이용한 테스트방법
KR102023424B1 (ko) 2017-11-07 2019-09-23 엔에이치엔 주식회사 어플리케이션 사용환경 설정방법 및 이를 이용한 테스트방법
KR20200138919A (ko) * 2019-06-03 2020-12-11 넷마블 주식회사 게임 내 밸런스 테스트를 수행하기 위한 컴퓨터 프로그램
KR102245783B1 (ko) * 2019-06-03 2021-04-28 넷마블 주식회사 게임 내 밸런스 테스트를 수행하기 위한 컴퓨터 프로그램
KR20210013812A (ko) * 2019-07-29 2021-02-08 넷마블 주식회사 게임 테스트 방법
KR102307870B1 (ko) * 2019-07-29 2021-09-30 넷마블 주식회사 게임 테스트 방법
KR20220119945A (ko) * 2021-02-22 2022-08-30 주식회사 슈퍼크리에이티브 턴제 대전게임 캐릭터 개발을 위한 밸런스 분석 시스템
KR102597394B1 (ko) * 2021-02-22 2023-11-03 (주)스마일게이트홀딩스 턴제 대전게임 캐릭터 개발을 위한 밸런스 분석 시스템
CN113535560A (zh) * 2021-07-14 2021-10-22 杭州网易云音乐科技有限公司 测试执行方法、装置、存储介质和计算设备
WO2023043189A1 (ko) * 2021-09-14 2023-03-23 엘지이노텍 주식회사 시뮬레이션 제공 장치 및 시뮬레이션 제공 방법
CN116645263A (zh) * 2023-07-25 2023-08-25 深流微智能科技(深圳)有限公司 一种图形处理单元
CN116645263B (zh) * 2023-07-25 2023-12-05 深流微智能科技(深圳)有限公司 一种图形处理单元

Similar Documents

Publication Publication Date Title
KR101751515B1 (ko) 테스트 실행 장치, 방법 및 컴퓨터 프로그램
US10664348B2 (en) Fault recovery management in a cloud computing environment
US9465734B1 (en) Coalition based memory management
US9250988B2 (en) Virtualization-based environments for problem resolution
US20160139949A1 (en) Virtual machine resource management system and method thereof
US10366112B2 (en) Compiling extract, transform, and load job test data cases
JP2016201133A (ja) プライベート・クラウド・コンピューティングためのシステムおよび方法
US10917456B2 (en) Application management in an application deployment pipeline
US9612942B2 (en) Verification of a computer program in respect to an unexpected response to an access request
CN114341847B (zh) 对容器的外部操作与突变事件的对应关系
US20140101109A1 (en) Backup management of software environments in a distributed network environment
US20210294730A1 (en) Managing resources used during a development pipeline
US20230418623A1 (en) Application remodeling method, system, cluster, medium, and program product
US20230153100A1 (en) Method and apparatus for managing model file in inference application
US20160179570A1 (en) Parallel Computing Without Requiring Antecedent Code Deployment
WO2024186549A1 (en) Artificial intelligence prompt processing and storage system
WO2024186550A1 (en) Generative artificial intelligence (ai) system
WO2024186527A1 (en) Generative artificial intelligence development system
US10817322B2 (en) Virtual machine management apparatus and virtual machine management method
Ali et al. Automated parallel GUI testing as a service for mobile applications
CN118056183A (zh) 优化即时编译过程
Tsai et al. Model-driven tenant development for PaaS-based SaaS
CN114860203A (zh) 项目创建方法、装置、服务器及存储介质
US11269596B2 (en) Automated microservice creation based on user interaction
US9436523B1 (en) Holistic non-invasive evaluation of an asynchronous distributed software process

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant