KR101335912B1 - 테스트 통합 관리 시스템 및 방법 - Google Patents

테스트 통합 관리 시스템 및 방법 Download PDF

Info

Publication number
KR101335912B1
KR101335912B1 KR1020120140251A KR20120140251A KR101335912B1 KR 101335912 B1 KR101335912 B1 KR 101335912B1 KR 1020120140251 A KR1020120140251 A KR 1020120140251A KR 20120140251 A KR20120140251 A KR 20120140251A KR 101335912 B1 KR101335912 B1 KR 101335912B1
Authority
KR
South Korea
Prior art keywords
test
data
design
test case
tester
Prior art date
Application number
KR1020120140251A
Other languages
English (en)
Inventor
이재웅
Original Assignee
(주)아이지오
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)아이지오 filed Critical (주)아이지오
Priority to KR1020120140251A priority Critical patent/KR101335912B1/ko
Application granted granted Critical
Publication of KR101335912B1 publication Critical patent/KR101335912B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management

Abstract

본 발명은 테스트 통합 관리 시스템 및 방법에 관한 것으로, 테스트 케이스의 설계 및 구현, 테스트 실행, 실행결과 보고서 생성을 포함하여 테스트 프로세스를 체계적으로 통합 관리함으로써, 테스트에 소요되는 시간 및 비용을 줄이면서 테스트의 품질을 향상시킬 수 있는 것을 특징으로 한다.

Description

테스트 통합 관리 시스템 및 방법{The system and method for integrated management of test}
본 발명은 테스트 통합 관리 시스템 및 방법에 관한 것으로, 더 자세하게는 테스트 케이스의 설계 및 구현, 테스트 실행, 실행결과 보고서 생성을 포함하여 테스트 프로세스를 체계적으로 통합 관리할 수 있는 테스트 통합 관리 시스템 및 방법에 관한 것이다.
소프트웨어 테스트란 소프트웨어가 규정된 요구사항을 만족시키고 있는지 검증하고, 기대되는 결과와 실제 결과와의 차이를 식별하기 위해 소프트웨어 시스템 전체 또는 일부의 구성요소를 실행하고 평가하는 과정이다.
예를 들어, 온라인 수강신청 소프트웨어를 개발하는 과정에서, 개발자들은 자신이 개발한 수강신청 소프트웨어가 학사관리 시스템과 실제로 연동하여 정상적으로 작동하는지를 테스트하여야 한다. 그러한 테스트 과정에서 오류가 발견되면 그 오류를 찾아서 원인을 분석하고 해결책을 찾아서 수정하는 과정을 거치게 된다.
하지만, 이러한 소프트웨어 테스트는 하드웨어 시스템과 운영체제에 대한 전문적인 지식을 요구하는 매우 복잡하고 어려운 절차를 필요로 하기 때문에, 숙련된 테스터(tester)에 의해 수작업으로 이루어지고 있는 실정이며, 이로 인해 다음과 같이 테스트와 관련된 여러 문제점들이 지적되고 있다.
먼저, 종래의 통합 테스트는 테스터가 키 스트로크(key-stroke) 방식으로 단순하고 반복적인 입력 작업을 계속하면서 표시되는 정보를 확인해야만 하기 때문에, 매우 번거롭고 시간이 많이 걸릴 뿐만 아니라 에러 발생 위험이 높아 신뢰성이 떨어지는 문제점이 있다.
그리고, 테스트 시나리오 작성 수준이 테스터마다 상이하기 때문에 요구 기능별로 동일한 품질의 테스트 수행이 어려우며, 이로 인해 테스터가 바뀌는 경우 정확한 절차에 따른 동일한 테스트가 수행될 가능성이 낮아지는 문제점이 있다.
또한, 테스터가 테스트 결과 보고서를 별도로 작성하는 데 많은 시간과 노력을 들여야 할 뿐만 아니라, 테스터에 따라 결과 보고서가 달라지기 때문에 신뢰도를 얻기 어려운 문제점이 있다.
게다가, 다양한 유형의 데이터를 이용하여 테스트하고자 하는 경우에는 테스트하고자 하는 대상 시스템에 따라 적용 가능한 테스트 케이스를 별도로 만들어야 하고, 테스트하고자 하는 대상이 동일할지라도 버전이 다른 경우는 적용 가능한 테스트 케이스를 별도로 만들어 관리해야만 하는데, 이러한 경우 테스트 케이스의 설계 및 구현이 매우 복잡하게 되는 문제점이 있다.
특히, 최근 시스템 개발 단계에서 소프트웨어의 복잡도 증가로 인하여 테스트 실행 환경과 테스트 케이스 설계에 많은 시간과 노력이 소요될 뿐만 아니라 테스트 단계에서 오류가 발생할 가능성도 높아지고 있다.
이에 따라 시스템 개발 단계에서 소프트웨어 복잡도에 따른 오류 발생을 줄이고 소프트웨어의 재사용성을 향상시키기 위한 여러 테스트 프로그램들이 개발되었다.
하지만, 이들 테스트 프로그램의 사용으로 테스트에 소요되는 시간과 노력은 많이 줄어들었으나, 여전히 시스템을 검증하기 위한 테스트 단계에서 상기와 같은 문제점들을 해결할 수 없다는 한계점을 갖고 있다.
본 발명은 상기한 바와 같은 종래의 문제점을 해소하기 위해 안출된 것으로, 본 발명의 목적은 테스트 케이스의 설계 및 구현, 테스트 실행, 실행결과 보고서 생성을 포함하여 테스트 프로세스를 체계적으로 통합 관리함으로써, 테스트에 소요되는 시간 및 비용을 줄이면서 테스트의 품질을 향상시키는 것이다.
좀 더 구체적으로 설명하면, 테스트 업무에 기본 지식을 가진 테스터라면 기존에 설계된 테스트 케이스를 재활용하여 쉽고 간단하게 테스트 케이스를 설계 및 구현할 수 있도록 함으로써, 테스트 케이스에 대한 재활용성을 증가시킬 수 있을 뿐만 아니라 테스트 케이스 설계에 소요되는 시간과 비용을 획기적으로 줄일 수 있도록 하는 것이다.
또한, 적용 분야에 따라 다양한 테스트를 수행할 수 있도록 하면서, 동일 또는 유사한 다수의 테스트 케이스를 설계할 때 반복적인 업무를 감소시킬 수 있도록 하는 것이다.
그리고, 테스트 케이스의 구현시 테스터의 편의를 위해 필요한 데이터 항목만을 화면에 표시할 수 있도록 하여 복잡한 테스트 케이스를 쉽게 구현할 수 있도록 하는 것이다.
또한, 간편하게 테스트를 실행하고 테스트 실행 후에 객관적인 평가 기준에 따라 테스트 실행결과 보고서를 간단하게 자동으로 생성함으로써, 보고서 작성에 소요되는 시간 및 비용을 줄이면서 신뢰할 수 있는 테스트 실행결과 보고서를 제공하는 것이다.
상기 목적을 달성하기 위하여 본 발명의 일 실시예에 따른 테스트 통합 관리 방법은, 테스트 케이스와 테스트 케이스에 포함되는 테스트 데이터 및 테스팅시 예상되는 예상결과를 테이블의 하나의 행에 함께 매핑하여 테스트하는 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션을 이용하여 테스트 케이스를 설계 및 구현하고 실행하는 테스트 통합 관리 방법에 있어서, (a) 상기 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션 상에서 테스트 케이스의 데이터 항목 추가 또는 삭제, 테스트 케이스의 이동, 추가, 삭제, 또는 복사 기능을 이용하여 테스트 케이스를 설계하는 단계와, (b) 상기 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션 상에서 데이터 항목의 추가 또는 삭제, 데이터 항목의 선택적인 표시, 테스트 데이터 자동생성, 테스트 케이스의 이동, 추가, 삭제, 또는 복사 기능을 이용하여 테스트 케이스를 구현하는 단계와, (c) 상기 구현된 테스트 케이스를 이용하여 테스트를 실행하고 테스트 실행결과를 등록한 후 테스트 실행결과를 기초로 테스트 실행결과 보고서를 자동으로 생성하는 단계를 포함하며, 상기 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션을 이용하여 테스트 케이스의 설계, 테스트 케이스의 구현, 테스트 실행의 순차적인 테스트 프로세스에 따라 테스트 케이스를 설계 및 구현하고 실행하는 것을 특징으로 한다.
삭제
삭제
삭제
삭제
바람직하게, 상기 (b) 단계에서, 상기 통합 관리 애플리케이션 상에서 테스터가 체크한 데이터 항목만 테스트 케이스 목록 화면에 표시하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게, 상기 (b) 단계에서, 상기 통합 관리 애플리케이션 상에서 테스터가 데이터 자동생성 메뉴를 선택하면, 자동으로 생성할 데이터 항목을 화면에 표시하고, 테스터로부터 자동으로 생성할 데이터 항목이 입력되면, 테스터의 입력에 따라 데이터를 자동으로 생성하거나, 테스터의 입력 데이터를 필드별로 저장해놓고 테스트 데이터로 이용하는 단계를 더 포함하는 것을 특징으로 한다.
삭제
삭제
바람직하게, 상기 (b) 단계에서, 테스트 케이스 설계 단계에서 설계된 테스트 케이스의 데이터 항목이 구현 단계에서 사용될 데이터 항목과 일치하지 않는 경우, 설계시의 데이터 항목을 구현시의 데이터 항목에 매핑하는 단계와, 테스터가 설계/매핑 데이터 가져오기 메뉴를 선택하면, 설계 단계에서 설계된 테스트 케이스 중에서 설계항목이 매핑된 해당 테스트 케이스를 로딩하여 구현에 적용하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게, 상기 (b) 단계에서, 설계시의 데이터 항목을 구현시의 데이터 항목에 매핑하는 단계에서, 테스터가 설계항목 매핑 메뉴를 선택하면, 설계시의 데이터 항목을 화면에 표시하는 단계; 테스터가 설계시의 데이터 항목의 매핑을 위해 매핑 버튼을 선택하면, 구현 단계에서 사용될 데이터 항목을 화면에 표시하는 단계; 테스터가 구현 단계에서 사용될 데이터 항목 중에서 설계시의 데이터 항목에 해당하는 데이터 항목을 선택하면, 설계시의 데이터 항목을 선택된 데이터 항목에 매핑하는 단계를 더 포함하는 것을 더 포함하는 것을 특징으로 한다.
삭제
삭제
삭제
삭제
삭제
본 발명에 의하면, 테스트 케이스의 설계 및 구현, 테스트 실행, 실행결과 보고서 생성을 포함하여 테스트 프로세스를 체계적으로 통합 관리함으로써, 테스트에 소요되는 시간 및 비용을 줄이면서 테스트의 품질을 향상시킬 수 있으며, 이에 따라 다음과 같은 효과를 갖는다.
첫째, 테스트 업무에 기본 지식을 가진 테스터라면 기존에 설계된 테스트 케이스를 재활용하여 쉽고 간단하게 테스트 케이스를 설계 및 구현할 수 있으며, 이에 따라 테스트 케이스에 대한 재활용성을 증가시킬 수 있을 뿐만 아니라, 테스트 케이스 설계에 소요되는 시간과 비용을 획기적으로 줄일 수 있다.
둘째, 테스트 데이터의 자동 생성과 데이터 항목의 자유로운 추가 또는 삭제를 이용하여 적용 분야에 따라 다양한 테스트를 수행할 수 있으며, 또한 테스트 케이스를 간단하게 이동, 추가, 삭제, 또는 복사할 수 있으므로 동일 또는 유사한 다수의 테스트 케이스를 설계할 때 반복적인 업무를 감소시킬 수 있다.
셋째, 테스트 케이스의 구현시 테스터의 편의를 위해 필요한 데이터 항목만을 화면에 표시할 수 있으며, 이에 따라 복잡한 테스트 케이스를 쉽게 구현할 수 있다.
넷째, 간편하게 테스트를 실행하고 테스트 실행 후에 객관적인 평가 기준에 따라 테스트 실행결과 보고서를 간단하게 자동 생성할 수 있으므로, 이에 따라 보고서 작성에 소요되는 시간 및 비용을 줄일 수 있을 뿐만 아니라 신뢰할 수 있는 테스트 실행결과 보고서를 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 테스트 통합 관리 시스템을 개략적으로 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 테스트 통합 관리 방법을 나타낸 흐름도이다.
도 3a 내지 도 3q는 본 발명을 실시하기 위한 테스트 통합 관리 애플리케이션의 화면 예시도이다.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여, 본 발명의 바람직한 실시예를 첨부도면을 참조하여 설명하기로 한다.
본 발명의 바람직한 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하거나 간략하게 설명한다.
본 발명을 설명하기에 앞서, 본 발명에서는 데이터 주도 방식(data driven)의 테스트 기법을 이용하며, 본 발명의 이해를 돕기 위해 데이터 주도 방식의 테스트 기법에 대하여 간략하게 설명하면 다음과 같다.
데이터 주도 방식의 테스트 기법은 테스트 케이스를 테스팅할 수 있는 테스트 데이터와 테스팅시 예상되는 예상결과를 테이블의 하나의 행에 함께 매핑하여 테스트하는 기법이다.
이러한 데이터 주도 방식의 테스트 기법은 통합적인 관점에서 다양한 유형의 데이터를 이용하여 테스트를 수행할 수 있을 뿐만 아니라 테스트 데이터의 무결성 검증 및 관리가 가능하다는 잇점이 있으며, 이러한 데이터 주도 방식의 테스트 기법은 이하에서 설명되는 본 발명의 실시예를 통해 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 테스트 통합 관리 시스템(100)을 개략적으로 나타낸 도면이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 테스트 통합 관리 시스템(100)은, 테스트의 기본 수행단위인 테스트 케이스를 설계하는 테스트 케이스 설계부(110)와, 테스트 케이스를 구현하는 테스트 케이스 구현부(120)와, 구현된 테스트 케이스를 이용하여 테스트를 실행하는 테스트 실행부(130)와, 테스트 실행결과를 기초로 테스트 실행결과 보고서를 자동으로 생성하는 테스트 실행결과 보고서 생성부(140)와, 테스트와 관련된 전체적인 동작을 제어하는 통합 관리부(150)와, 테스트 케이스 및 테스트 데이터가 저장되는 데이터베이스(DB)를 포함하여 구성된다.
이와 같이 구성된 본 발명의 테스트 통합 관리 시스템(100)은 웹서비스 소프트웨어, UI 응용 소프트웨어, 전자제품 소프트웨어 등의 테스트 대상을 테스팅할 수 있도록 테스트 케이스의 설계 및 구현과 테스트의 실행을 지원한다.
특히, 본 발명의 테스트 통합 관리 시스템(100)은 테스트 케이스의 설계 및 구현, 테스트 실행, 테스트 실행결과 보고서 생성을 포함하여 테스트 프로세스를 체계적으로 통합 관리함으로써, 테스트에 소요되는 시간 및 비용을 줄이면서 테스트의 품질을 향상시킬 수 있는 것에 특징이 있으며, 이에 대하여 좀 더 자세히 설명하면 다음과 같다.
도 2는 본 발명의 일 실시예에 따른 테스트 통합 관리 방법을 나타낸 흐름도이고, 도 3a 내지 도 3q는 본 발명을 실시하기 위한 테스트 통합 관리 애플리케이션의 화면 예시도이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 테스트 통합 관리 방법은 크게 테스트 케이스 설계 단계(S210), 테스트 케이스 구현 단계(S220), 테스트 실행 및 실행결과 등록 단계(S230), 테스트 실행결과 보고서 생성 단계(S240)로 나눌 수 있으며, 각 단계에 대하여 도 3a 내지 도 3q를 참조하여 더 자세히 설명하면 다음과 같다.
(1) 테스트 케이스 설계 단계(S210)
이 단계는 테스트 대상에 대한 테스트 계획을 세우는 단계로, 테스트를 위한 테스트 케이스 및 이들 테스트 케이스로 구성되는 테스트 수트(test suit)를 설계하는 단계이다.
먼저, 도 3a에 도시된 바와 같이 테스터가 테스트 요구사항을 분석하여 테스트 프로젝트(웹테스트 프로젝트, 수강신청 테스트 프로젝트 등), 테스트 분야(대분류, 중분류, 소분류), 테스트 대상 목록(브라우저별, 운영체제별, 전자제품 모델별 등)을 입력하면, 상기 테스트 케이스 설계부(110)는 입력된 정보를 기초로 테스트 환경을 설정한다.
여기에서, 테스트 대상이 웹서비스 소프트웨어인 경우에는 인터넷 익스플로러(IE), 크롬, 오페라 등의 브라우저별로 테스트 대상 목록을 설정할 수 있고, 테스트 대상이 핸드폰과 같은 전자제품 소프트웨어인 경우에는 테스트 대상 목록을 모델별로 설정할 수 있으며, 이러한 테스트 대상 목록 설정에 의해 테스트하고자 하는 테스트 대상에 따라 동일한 테스트 케이스를 이용하여 반복적으로 테스트를 수행할 수 있다.
테스트 환경 설정이 완료되면, 상기 테스트 케이스 설계부(110)는 도 3b에 도시된 바와 같이 테스터로부터 입력되는 테스트 케이스명, 예상결과, 가중치, 테스트 데이터(아이디, 패스워드 등)를 기초로 테스트 케이스 및 이들 테스트 케이스로 구성되는 테스트 수트를 설계한다.
예를 들어, 정상 아이디와 패스워드를 입력하였을 때 로그인이 정상적으로 이루어지는지를 테스트하기 위한 테스트 케이스와, 오류 아이디와 패스워드를 입력하였을 때 오류에 해당하는 메시지가 표시되는지를 테스트하기 위한 테스트 케이스를 설계한다.
특히, 상기 테스트 케이스 설계부(110)는 도 3c에 도시된 바와 같이 설계의 편의성을 위해 기존에 설계된 테스트 케이스를 재활용할 수 있도록 하는 한편, 테스트 케이스의 이동, 추가, 삭제, 또는 복사를 지원하고, 데이터 항목을 자유롭게 추가 또는 삭제할 수 있도록 지원하며, 이에 대하여 좀 더 자세히 설명하면 다음과 같다.
먼저, 도 3d에 도시된 바와 같이, 테스터가 기존 설계 가져오기 메뉴를 선택하면, 상기 테스트 케이스 설계부(110)는 데이터베이스(DB)에 저장되어 있는 테스트 수트를 검색하여 화면에 표시한다. 이때, 테스터로부터 검색 인덱스가 입력되면 입력된 검색 인덱스에 해당하는 테스트 수트를 검색하여 화면에 표시할 수도 있다.
그 다음, 테스터가 검색 결과에서 테스트 수트를 선택하고 적용 버튼을 선택하면, 상기 테스트 케이스 설계부(110)는 해당 테스트 수트에 포함된 테스트 케이스를 설계에 적용한다.
여기에서, 테스트 케이스에는 테스트 케이스명, 예상결과, 가중치, 테스트 데이터(아이디, 패스워드 등)가 포함되어 있는 것이 바람직하다.
즉, 테스트 업무에 기본 지식을 가진 테스터라면 기존에 설계된 테스트 케이스를 재활용하여 쉽고 간단하게 테스트 케이스를 설계할 수 있으며, 이에 따라 테스트 케이스에 대한 재활용성을 증가시킬 수 있을 뿐만 아니라 테스트 케이스 설계에 소요되는 시간과 비용을 획기적으로 줄일 수 있다.
그 다음, 도 3e에 도시된 바와 같이 테스터가 항목컬럼 추가/삭제 메뉴를 선택하면, 상기 테스트 케이스 설계부(110)는 테스터로부터 입력된 메뉴에 따라 테스트 케이스의 데이터 항목(아이디, 패스워드, 확인클릭 등)을 추가 또는 삭제한다.
즉, 테스트 케이스의 데이터 항목을 자유롭게 추가 또는 삭제할 수 있으므로, 적용 분야에 따라 다양한 테스트가 가능하게 된다.
또한, 도 3f에 도시된 바와 같이 테스터가 행이동, 행추가, 행삭제, 또는 행복사 메뉴를 선택하면, 상기 테스트 케이스 설계부(110)는 테스터로부터 입력된 메뉴에 따라 테스트 케이스의 이동, 추가, 삭제, 또는 복사를 수행하며, 이때, 테스트 케이스에 포함된 테스트 데이터도 함께 이동, 추가, 삭제, 또는 복사된다.
즉, 테스트 케이스를 간단하게 이동, 추가, 삭제, 또는 복사할 수 있으므로, 동일 또는 유사한 다수의 테스트 케이스를 설계할 때 반복적인 업무를 감소시킬 수 있다.
(2) 테스트 케이스 구현 단계(S220)
이 단계는 테스트 케이스 설계 단계(S210)를 통해 설계된 테스트 케이스를 실제로 구현하는 단계이다.
좀 더 자세히 설명하면, 도 3g에 도시된 바와 같이 데이터 항목의 자유로운 추가 또는 삭제, 테스트 데이터 자동생성, 테스트 케이스의 이동, 추가, 삭제, 또는 복사 기능 등을 이용하여 테스트 케이스를 쉽고 간단하게 구현하며, 이에 대하여 좀 더 자세히 설명하면 다음과 같다.
① 데이터 항목의 추가 또는 삭제
먼저, 도 3h에 도시된 바와 같이 테스터가 항목컬럼 추가/삭제 메뉴를 선택하면, 상기 테스트 케이스 구현부(120)는 테스터로부터 입력된 메뉴에 따라 테스트 케이스의 데이터 항목(아이디, 패스워드, 확인클릭 등)을 추가 또는 삭제한다.
이때, 테스터가 설계항목 가져오기 메뉴를 선택하면, 설계시의 데이터 항목을 가져와서 추가할 수도 있다.
② 데이터 항목의 선택적인 표시
테스트 케이스에 정의된 데이터 항목이 많을 경우, 테스트 케이스의 구현시에 테스터가 많은 항목의 테스트 데이터를 화면상에서 제대로 확인할 수가 없으며, 이로 인해 테스트 구현에 어려움을 겪을 수 있다.
이를 위해 도 3i에 도시된 바와 같이 상기 테스트 케이스 구현부(120)는 테스트 케이스의 데이터 항목 중에서 테스터가 체크한 데이터 항목만 테스트 케이스 목록 화면에 표시되도록 한다.
즉, 테스트 케이스의 구현시 테스터의 편의를 위해 필요한 데이터 항목만을 테스트 케이스 목록 화면에 표시함으로써 복잡한 테스트 케이스를 쉽게 구현할 수 있도록 한다.
③ 테스트 데이터 자동 생성
도 3j에 도시된 바와 같이 테스터가 데이터 자동생성 메뉴를 선택하면, 상기 테스트 케이스 구현부(120)는 자동으로 생성할 데이터 항목을 화면에 표시한다. 그 다음, 테스터로부터 어느 하나의 데이터 항목이 입력되면, 테스터의 입력에 따라 일자별 또는 숫자별 등의 증감 데이터를 자동으로 생성하거나, 테스터의 입력 데이터를 필드별(직원명부, 사용자ID 등)로 저장해놓고 테스트 데이터로 이용할 수 있도록 한다.
즉, 테스트 데이터의 자동 생성 기능을 이용하여 다수의 테스트 케이스를 신속하고 간단하게 구현할 수 있다.
④ 테스트 케이스의 이동, 추가, 삭제, 복사
도 3k에 도시된 바와 같이 테스터가 행이동, 행추가, 행삭제, 또는 행복사 메뉴를 선택하면, 상기 테스트 케이스 구현부(120)는 테스터로부터 입력된 메뉴에 따라 테스트 케이스를 이동, 추가, 삭제, 또는 복사한다.
이때, 테이터 항목의 선택적인 표시를 통해 테스트 케이스에서 일부의 데이터 항목만 선택적으로 테스트 케이스 목록 화면에 표시되었다 하더라도, 테스터가 행이동, 행추가, 행삭제, 또는 행복사 메뉴를 선택하면, 화면에 표시된 데이터 항목과 화면에 표시되지 않은 데이터 항목 모두 이동, 추가, 삭제, 또는 복사된다.
즉, 테스트 케이스를 간단하게 이동, 추가, 삭제, 또는 복사할 수 있으므로, 동일 또는 유사한 다수의 테스트 케이스를 신속하고 간단하게 구현할 수 있다.
⑤ 기존 테스트 케이스 가져오기
도 3l에 도시된 바와 같이 테스터가 기존 테스트 케이스 가져오기 메뉴를 선택하면, 상기 테스트 케이스 구현부(120)는 데이터베이스(DB)에서 기존에 구현된 테스트 수트를 검색하여 화면에 표시한다. 이때, 테스터로부터 검색 인덱스가 입력되면 입력된 검색 인덱스에 해당하는 테스트 수트를 검색하여 화면에 표시할 수도 있다.
그 다음, 테스터가 검색 결과에서 테스트 수트를 선택하고 적용 버튼을 선택하면, 상기 테스트 케이스 구현부(120)는 해당 테스트 수트에 포함된 테스트 케이스를 로딩하여 구현에 적용한다.
즉, 기존에 구현된 테스트 케이스를 그대로 이용할 수 있으므로, 테스트 케이스 구현에 소요되는 시간과 비용을 획기적으로 줄일 수 있다.
한편, 설계 단계(S210)에서 설계된 테스트 케이스를 구현 단계에서 그대로 이용할 수도 있는데, 설계 단계(S210)에서 설계된 테스트 케이스를 구현 단계에서 그대로 이용하기 위해서는 설계 단계(S210)에서 설계된 테스트 케이스의 데이터 항목이 구현 단계에서 사용될 데이터 항목과 일치해야 한다.
하지만, 설계 단계와 구현 단계의 시차 등으로 인해 설계 단계(S210)에서 설계된 테스트 케이스의 데이터 항목이 구현 단계에서 사용될 데이터 항목과 일치하지 않을 수도 있으며, 이를 위해 상기 테스트 케이스 구현부(120)는 설계시의 데이터 항목을 구현시의 데이터 항목에 매핑할 수 있도록 매핑 기능을 지원하며, 이에 대하여 좀 더 자세히 설명하면 다음과 같다.
먼저, 도 3m에 도시된 바와 같이 테스터가 설계항목 매핑 메뉴를 선택하면, 상기 테스트 케이스 구현부(120)는 설계시의 데이터 항목(설계항목)을 화면에 표시한다. 그리고, 테스터가 설계항목 중에서 [패스워드]의 매핑을 위해 매핑 버튼(F)을 선택하면, 상기 테스트 케이스 구현부(120)는 구현 단계에서 사용될 데이터 항목(테스트 항목)을 화면에 표시한다. 그 다음, 테스터가 설계항목의 [패스워드]에 해당하는 구현 단계에서의 [패스워드]를 선택하면, 상기 테스트 케이스 구현부(120)는 설계시의 데이터 항목인 [패스워드]를 구현시의 데이터 항목인 [패스워드]에 매핑한다.
그 다음, 도 3n에 도시된 바와 같이 테스터가 설계/매핑 데이터 가져오기 메뉴를 선택하면, 상기 테스트 케이스 구현부(120)는 설계 단계(S210)에서 설계된 테스트 케이스 중에서 설계항목이 매핑된 해당 테스트 케이스를 로딩하여 구현에 적용한다.
즉, 위와 같은 설계항목 매핑 기능을 통해 설계 단계(S210)에서 설계된 테스트 케이스를 그대로 이용하여 테스트 케이스를 구현할 수 있으며, 이에 따라 구현시에 테스트 데이터를 입력하는 번거로움을 덜 수 있어 쉽고 간단하게 테스트 케이스를 구현할 수 있다.
(3) 테스트 실행 및 실행결과 등록 단계(S230)
이 단계는 테스트 케이스 구현 단계(S220)에서 구현된 테스트 케이스를 이용하여 테스트를 실행하고 테스트 실행결과를 등록하는 단계이다.
도 3o에 도시된 바와 같이, 테스터가 미실행된 테스트 케이스를 선택하면, 상기 테스트 실행부(130)는 해당 테스트 케이스를 이용하여 테스트를 실행하면서, 테스트의 성공 또는 실패, 테스트 내용, 각 데이터 항목별 테스트 결과, 스크린 캡쳐 이미지 등의 테스트 실행결과를 데이터베이스(DB)에 등록한다.
이때, 상기 테스트 실행부(130)는 테스트 실행시에 테스터가 간편 스크린샷 캡쳐 기능을 이용하여 테스트 대상 화면을 한번 클릭하면, 테스트 대상 화면을 캡쳐하여 캡쳐에 의해 얻어진 스크린 캡쳐 이미지를 데이터베이스(DB)에 등록한다.
그리고, 상기 테스트 실행부(130)는 테스트 케이스의 예상결과대로 테스트가 실행되면(예를 들어 테스트 케이스의 예상결과가 정상이고 테스트가 정상적으로 실행되면), 해당 테스트가 성공한 것으로 등록하며, 예상결과대로 테스트가 실행되지 않으면(예를 들어 테스트 케이스의 예상결과가 오류인데 테스트가 정상적으로 실행되면), 해당 테스트가 실패한 것으로 등록한다.
한편, 테스크 실행결과에서 결함이 검출된 경우, 도 3p에 도시된 바와 같이 상기 테스트 실행부(130)는 결함 등록 메뉴를 이용하여 검출된 결함을 바로 등록할 수 있도록 한다.
(4) 테스트 실행결과 보고서 생성 단계(S240)
이 단계는 테스트 실행결과를 간단하게 확인할 수 있는 테스트 실행결과 보고서를 자동으로 생성하는 단계이다.
먼저, 도 3q에 도시된 바와 같이, 상기 테스트 실행결과 보고서 생성부(140)는 테스트에 대한 기본 정보(프로젝트 ID, 프로젝트명, 테스트수트 ID, 테스트수트명, 설계 및 매핑 유무, 테스트 시작 또는 종료 일시 등)를 표시하고, 실행회차별로 테스트 케이스의 목록 및 실행결과를 표시한다.
그리고, 상기 테스트 실행결과 보고서 생성부(140)는 테스터가 선택한 테스트 케이스의 테스트 실행결과 정보(성공 또는 실패, 수행회차, 스크린 샷 등), 테스트 설계 정보(화면ID, 테스트 분야, 테스트 내용 등), 입력 데이터(아이디, 패스워드 등), 라인별 실행결과, 결함 등록 정보를 화면에 표시한다.
이때, 테스트 실행결과를 시각적으로 확인할 수 있도록 스크린 캡쳐 이미지도 화면에 표시하는 것이 바람직하다.
즉, 테스트 실행 후에 객관적인 평가 기준에 따라 테스트 실행결과 보고서를 자동으로 생성할 수 있으므로, 이에 따라 보고서 작성에 소요되는 시간 및 비용을 줄일 수 있다.
상술한 바와 같이, 본 발명에 의하면, 테스트 케이스의 설계 및 구현, 테스트 실행, 테스트 실행결과 보고서 생성을 포함하여 테스트 프로세스를 체계적으로 통합 관리함으로써 테스트에 소요되는 시간 및 비용을 줄이면서 테스트의 품질을 향상시킬 수 있으며, 이에 따라 다음과 같은 잇점을 갖는다.
첫째, 테스트 업무에 기본 지식을 가진 테스터라면 기존에 설계된 테스트 케이스를 재활용하여 쉽고 간단하게 테스트 케이스를 설계 및 구현할 수 있으며, 이에 따라 테스트 케이스에 대한 재활용성을 증가시킬 수 있을 뿐만 아니라, 테스트 케이스 설계에 소요되는 시간과 비용을 획기적으로 줄일 수 있다.
둘째, 테스트 데이터의 자동 생성과 데이터 항목의 자유로운 추가 또는 삭제를 이용하여 적용 분야에 따라 다양한 테스트를 수행할 수 있으며, 또한 테스트 케이스를 간단하게 이동, 추가, 삭제, 또는 복사할 수 있으므로 동일 또는 유사한 다수의 테스트 케이스를 설계할 때 반복적인 업무를 감소시킬 수 있다.
셋째, 테스트 케이스의 구현시 테스터의 편의를 위해 필요한 데이터 항목만을 화면에 표시할 수 있으며, 이에 따라 복잡한 테스트 케이스를 쉽게 구현할 수 있다.
넷째, 간편하게 테스트를 실행하고 테스트 실행 후에 객관적인 평가 기준에 따라 테스트 실행결과 보고서를 자동으로 생성할 수 있으므로, 이에 따라 보고서 작성에 소요되는 시간 및 비용을 줄일 수 있을 뿐만 아니라, 신뢰할 수 있는 테스트 실행결과 보고서를 제공할 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 설명하였다. 그러나, 본 발명의 실시예는 당업계에서 통상의 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위하여 제공되어지는 것으로, 본 발명의 범위가 상기의 실시예에 한정되는 것은 아니며, 여러 가지 다른 형태로 변형이 가능함은 물론이다.
100 : 테스트 통합 관리 시스템
110 : 테스트 케이스 설계부
120 : 테스트 케이스 구현부
130 : 테스트 실행부
140 : 테스트 실행결과 보고서 생성부
150 : 통합 관리부

Claims (16)

  1. 테스트 케이스와 테스트 케이스에 포함되는 테스트 데이터 및 테스팅시 예상되는 예상결과를 테이블의 하나의 행에 함께 매핑하여 테스트하는 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션을 이용하여 테스트 케이스를 설계 및 구현하고 실행하는 테스트 통합 관리 방법에 있어서,
    (a) 상기 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션 상에서 테스트 케이스의 데이터 항목 추가 또는 삭제, 테스트 케이스의 이동, 추가, 삭제, 또는 복사 기능을 이용하여 테스트 케이스를 설계하는 단계와,
    (b) 상기 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션 상에서 데이터 항목의 추가 또는 삭제, 데이터 항목의 선택적인 표시, 테스트 데이터 자동생성, 테스트 케이스의 이동, 추가, 삭제, 또는 복사 기능을 이용하여 테스트 케이스를 구현하는 단계와,
    (c) 상기 구현된 테스트 케이스를 이용하여 테스트를 실행하고 테스트 실행결과를 등록한 후 테스트 실행결과를 기초로 테스트 실행결과 보고서를 자동으로 생성하는 단계를 포함하며,
    상기 데이터 주도 방식(data driven)의 테스트 기법이 적용된 테스트 통합 관리 애플리케이션을 이용하여 테스트 케이스의 설계, 테스트 케이스의 구현, 테스트 실행의 순차적인 테스트 프로세스에 따라 테스트 케이스를 설계 및 구현하고 실행하는 것을 특징으로 하는 테스트 통합 관리 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 제 1항에 있어서, 상기 (b) 단계에서,
    상기 통합 관리 애플리케이션 상에서 테스터가 체크한 데이터 항목만 테스트 케이스 목록 화면에 표시하는 단계를 더 포함하는 것을 특징으로 하는 테스트 통합 관리 방법.
  7. 제 1항에 있어서, 상기 (b) 단계에서,
    상기 통합 관리 애플리케이션 상에서 테스터가 데이터 자동생성 메뉴를 선택하면, 자동으로 생성할 데이터 항목을 화면에 표시하고, 테스터로부터 자동으로 생성할 데이터 항목이 입력되면, 테스터의 입력에 따라 데이터를 자동으로 생성하거나, 테스터의 입력 데이터를 필드별로 저장해놓고 테스트 데이터로 이용하는 단계를 더 포함하는 것을 특징으로 하는 테스트 통합 관리 방법.
  8. 삭제
  9. 삭제
  10. 제 1항에 있어서, 상기 (b) 단계에서,
    테스트 케이스 설계 단계에서 설계된 테스트 케이스의 데이터 항목이 구현 단계에서 사용될 데이터 항목과 일치하지 않는 경우,
    설계시의 데이터 항목을 구현시의 데이터 항목에 매핑하는 단계와,
    테스터가 설계/매핑 데이터 가져오기 메뉴를 선택하면, 설계 단계에서 설계된 테스트 케이스 중에서 설계항목이 매핑된 해당 테스트 케이스를 로딩하여 구현에 적용하는 단계를 더 포함하는 것을 특징으로 하는 테스트 통합 관리 방법.
  11. 제 10항에 있어서, 상기 (b) 단계에서,
    설계시의 데이터 항목을 구현시의 데이터 항목에 매핑하는 단계에서,
    테스터가 설계항목 매핑 메뉴를 선택하면, 설계시의 데이터 항목을 화면에 표시하는 단계;
    테스터가 설계시의 데이터 항목의 매핑을 위해 매핑 버튼을 선택하면, 구현 단계에서 사용될 데이터 항목을 화면에 표시하는 단계;
    테스터가 구현 단계에서 사용될 데이터 항목 중에서 설계시의 데이터 항목에 해당하는 데이터 항목을 선택하면, 설계시의 데이터 항목을 선택된 데이터 항목에 매핑하는 단계를 더 포함하는 것을 더 포함하는 것을 특징으로 하는 테스트 통합 관리 방법.
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
KR1020120140251A 2012-12-05 2012-12-05 테스트 통합 관리 시스템 및 방법 KR101335912B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120140251A KR101335912B1 (ko) 2012-12-05 2012-12-05 테스트 통합 관리 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120140251A KR101335912B1 (ko) 2012-12-05 2012-12-05 테스트 통합 관리 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR101335912B1 true KR101335912B1 (ko) 2013-12-02

Family

ID=49987027

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120140251A KR101335912B1 (ko) 2012-12-05 2012-12-05 테스트 통합 관리 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101335912B1 (ko)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106569953A (zh) * 2016-11-03 2017-04-19 武汉烽火网络有限责任公司 增强通信设备自动化测试脚本可移植性和健壮性的方法
KR101773708B1 (ko) 2016-04-27 2017-08-31 엘에스산전 주식회사 인버터의 자동 테스트 방법
KR20180060675A (ko) * 2016-11-29 2018-06-07 국방과학연구소 전자장비 입출력신호 및 ｓｗ 성능 시험 장치 및 방법
KR101957607B1 (ko) 2017-11-24 2019-03-13 김현기 시험 관리 시스템
KR20200000684A (ko) * 2018-06-25 2020-01-03 (주)농협정보시스템 테스트 통합 관리시스템 및 그 제어방법
KR20200077311A (ko) * 2018-12-20 2020-06-30 서울여자대학교 산학협력단 Stpa 기반 안전성 시뮬레이션 시스템 및 방법, 컴퓨터 판독가능 기록매체
KR20200077830A (ko) 2018-12-21 2020-07-01 이화여자대학교 산학협력단 블록체인 기반 테스트 데이터 관리 방법 및 블록체인 노드 장치
KR20210131216A (ko) * 2020-04-21 2021-11-02 유아이패스, 인크. 로봇 프로세스 자동화를 위한 테스트 자동화
US11797432B2 (en) 2020-04-21 2023-10-24 UiPath, Inc. Test automation for robotic process automation

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7313564B2 (en) * 2002-12-03 2007-12-25 Symbioware, Inc. Web-interactive software testing management method and computer system including an integrated test case authoring tool

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7313564B2 (en) * 2002-12-03 2007-12-25 Symbioware, Inc. Web-interactive software testing management method and computer system including an integrated test case authoring tool

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101773708B1 (ko) 2016-04-27 2017-08-31 엘에스산전 주식회사 인버터의 자동 테스트 방법
CN106569953A (zh) * 2016-11-03 2017-04-19 武汉烽火网络有限责任公司 增强通信设备自动化测试脚本可移植性和健壮性的方法
KR20180060675A (ko) * 2016-11-29 2018-06-07 국방과학연구소 전자장비 입출력신호 및 ｓｗ 성능 시험 장치 및 방법
KR101987110B1 (ko) * 2016-11-29 2019-06-10 국방과학연구소 전자장비 입출력신호 및 ｓｗ 성능 시험 장치 및 방법
KR101957607B1 (ko) 2017-11-24 2019-03-13 김현기 시험 관리 시스템
KR102111392B1 (ko) * 2018-06-25 2020-05-15 (주)농협정보시스템 테스트 통합 관리시스템 및 그 제어방법
KR20200000684A (ko) * 2018-06-25 2020-01-03 (주)농협정보시스템 테스트 통합 관리시스템 및 그 제어방법
KR20200077311A (ko) * 2018-12-20 2020-06-30 서울여자대학교 산학협력단 Stpa 기반 안전성 시뮬레이션 시스템 및 방법, 컴퓨터 판독가능 기록매체
KR102149950B1 (ko) 2018-12-20 2020-08-31 서울여자대학교 산학협력단 Stpa 기반 안전성 시뮬레이션 시스템 및 방법, 컴퓨터 판독가능 기록매체
KR20200077830A (ko) 2018-12-21 2020-07-01 이화여자대학교 산학협력단 블록체인 기반 테스트 데이터 관리 방법 및 블록체인 노드 장치
KR20210131216A (ko) * 2020-04-21 2021-11-02 유아이패스, 인크. 로봇 프로세스 자동화를 위한 테스트 자동화
KR102412237B1 (ko) * 2020-04-21 2022-06-23 유아이패스, 인크. 로봇 프로세스 자동화를 위한 테스트 자동화
US11789853B2 (en) 2020-04-21 2023-10-17 UiPath, Inc. Test automation for robotic process automation
US11797432B2 (en) 2020-04-21 2023-10-24 UiPath, Inc. Test automation for robotic process automation

Similar Documents

Publication Publication Date Title
KR101335912B1 (ko) 테스트 통합 관리 시스템 및 방법
US7917895B2 (en) Automated software testing and validation system
US11762717B2 (en) Automatically generating testing code for a software application
US20050166094A1 (en) Testing tool comprising an automated multidimensional traceability matrix for implementing and validating complex software systems
US7895575B2 (en) Apparatus and method for generating test driver
US8311794B2 (en) Testing executable logic
WO2017165071A1 (en) Visual regression analysis
KR20170052668A (ko) 데이터 구동 테스트 프레임워크
CN112270149A (zh) 验证平台自动化集成方法、系统及电子设备和存储介质
US9342439B2 (en) Command coverage analyzer
KR20130028207A (ko) 웹 기반의 소프트웨어 개발 및 테스트 자동화 장치
Bures et al. SmartDriver: Extension of selenium WebDriver to create more efficient automated tests
CN109101410A (zh) 一种风险驱动测试方法和装置以及计算机可读存储介质
Moghadam et al. Resolving conflict and dependency in refactoring to a desired design
JP2016126700A (ja) プログラム検証装置、プログラム検証方法及びプログラム検証プログラム
Karinsalo et al. Software reuse and the test development process: a combined approach
CN116932414B (zh) 界面测试用例的生成方法、设备及计算机可读存储介质
Domínguez Osorio et al. Automated GUI ripping for web applications
CN113094281B (zh) 一种混合式App的测试方法及装置
KR20130058348A (ko) 자산 기반의 요구사항 시뮬레이터 및 요구사항 관리 방법
Bansal et al. Procuring Performance Testing Solutions With Java & Loadrunner Expending Non functional Testing and Analytical Tools
Gupta et al. Non Performance Testing in Software Development Life Cycle
Nizam A Testing Method for Detecting Data Inconsistencies in Model View Controller Architecture
Hellmann Automated GUI Testing for Agile Development Environments
CN117234946A (zh) 项目库系统的自动化测试方法及相关设备

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161125

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171120

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20181126

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20191125

Year of fee payment: 7