KR100969877B1 - 품질테스트자동화시스템 - Google Patents

Abstract

본 발명의 일 실시예에 따른 품질테스트자동화시스템은 개발시스템의 웹 단말 프로그램을 실행하기 위한 웹 단말기 상에서 발생하는 이벤트를 레코딩하기 위한 레코딩부와 상기 레코딩부에서 생성한 데이터를 이용해서 상기 개발 시스템의 웹 단말 프로그램을 자동 일괄 실행하는 재생부를 갖는 품질테스트자동화엔진, 상기 웹 단말기가 웹 단말 프로그램을 반복적으로 수행할 수 있도록 테스트케이스를 저장 및 전송하는 테스트케이스 데이터베이스, 및 상기 재생부에서 재실행된 데스트 결과를 검증, 분석 및 리포팅하는 테스트 결과보고 자동화 모듈을 포함한다. 따라서, 테스트데이터를 일괄적으로 입력할 수 있고, 테스트를 자동으로 수행하며, 테스트 결과를 자동으로 보고할 수 있고, 테스트데이터를 재사용할 수 있다.

테스트케이스, 테스트자동화엔진, 테스트결과보고자동화모듈

Description

품질테스트자동화시스템{TEST AUTOMATING SYSTEM}

본 발명은 품질테스트자동화시스템에 관한 것이다.

본 발명은 보다 상세하게는 화면의 입력과 처리결과만을 대상으로 개발시스템의 정당성을 검증하여 개발자가 발견하지 못한 결함을 최종 사용자의 입장에서 발견하기 위한 품질테스트자동화시스템에 관한 것이다.

일반적으로, 시스템 개발은 현업부서로부터 개발의뢰를 받은 IT 개발부서에서 개발 내용을 분석하여 시스템 설계를 하고 구현 및 단위 테스트를 해보고 통합적으로 테스트를 한 후 이를 현업부서에서 인수하여 인수테스트를 수행한 후 시스템에 적용한다.

최근에, 개발시스템의 정당성을 검증하여 개발자가 발견하지 못한 결함을 최종 사용자의 입장에서 발견하고 현업부서의 인수테스트 전에 개발시스템의 신뢰성을 높이기 위하여 숙련된 테스트전담팀을 구성하여 통합기능테스트를 수행하고 있다.

이러한 통합기능테스트는 테스터가 테스트할 화면을 직접 조작하여 테스트를 하여야 하며, 테스터가 관련 화면에 대해 정확한 이해가 있지 않으면 입력할 값을 모르게 되기 때문에 개발자나 다른 테스터에게 문의하여야 하는 문제점이 있다.

또한, 통합기능테스트는 단말 프로그램이 구현되기 위해서 단말 주변기기 또는 외부 서버의 지원을 받아야 하며, 책임자 승인이 필요한 경우에는 책임자 승인을 받아야 하지만, 이를 위해서는 다른 업무처리에 제한을 주게 되거나, 책임자 승인을 별도로 받아야 하는 등 시간, 노동력, 보안상의 문제가 있기 때문에 제한된 시간이나 제한된 조건에서만 실행해 봐야 한다.

따라서 테스트 범위가 변경 프로그램 위주의 기능 테스트에 제한되어 테스트 신뢰성이 떨어지는 문제점이 있었다.

또한, 이러한 통합기능테스트는 테스터가 테스트한 결과에 대한 결과보고서 작성하는데 많은 시간과 노력을 들여야 할 뿐만 아니라, 테스터에 따라 결과보고서가 달라지기 때문에 재사용되기 어려운 문제점이 있다.

또한, 테스트방법이 키 스트로크(key-stroke) 방식으로 단순하고 반복적인 수기작업으로 개발과정에서 프로그램이 수정될 때마다 동일한 거래를 수작업으로 반복하여 테스트하여야 하므로 테스트 피로도를 높여 에러 발견 누락 위험을 증가시킬 수 있고, 테스트 시간을 예측할 수 없는 문제점이 있었다.

따라서 본 발명은 이러한 문제점을 해결하기 위하여 안출된 것으로, 본 발명의 목적은 현재 수작업으로 실시하고 있는 품질 테스트를 자동화하고, 대량의 테스트를 일괄적으로 상시 환경에서 수행할 수 있으며, 결과보고서를 자동을 생성할 수 있는 품질테스트자동화시스템을 제공하는 것이다.

이를 위하여, 본 발명의 일 실시예에 따른 품질테스트자동화시스템은 개발시스템의 웹 단말 프로그램을 실행하기 위한 웹 단말기 상에서 발생하는 이벤트를 레코딩하기 위한 레코딩부와 상기 레코딩부에서 생성한 테스트케이스를 이용해서 상기 개발 시스템의 웹 단말 프로그램을 자동 일괄 실행하는 재생부를 갖는 품질테스트자동화엔진;
상기 웹 단말기가 웹 단말 프로그램을 반복적으로 수행할 수 있도록 상기 테스트케이스를 저장하는 테스트케이스 데이터베이스; 및
상기 재생부에서 재실행된 테스트 결과를 검증, 분석 및 리포팅하는 테스트 결과보고 자동화모듈을 포함하며,
상기 테스트 결과보고 자동화모듈에 의해서 상기 웹 단말기에 표시되는 화면은, 메인화면(테스트시나리오), 데이터테이블 화면, 테스트케이스 메인화면, 스크립트 라인별 화면, 체크포인트 화면, 에러화면 중 적어도 하나이며,
상기 화면은 좌우 프레임으로 나뉘어 왼쪽에는 트리구조, 오른쪽에는 각 노드 별 상세내용이 표현되고,
상기 결과 메인 화면에는 테스트 케이스 명, 테스터 아이디 혹은 이름, 작업 시작시간, 작업 종료시간, 반복회수, 전체 테스트 중에 ‘성공’,’패스’,’실패’,’경고’의 횟수가 표시되는 것을 특징으로 한다.

본 발명의 일 실시예에 따른 품질테스트자동화시스템은 최종 사용자 입장에서 수작업으로 실행되던 통합기능테스트를 자동화할 수 있기 때문에 수작업에 의한 테스트 수행보다는 훨씬 빠르게 테스트를 수행할 수 있다.

본 발명의 일 실시예에 따른 개발시스템의 테스트 자동화시스템은 대량의 테스트를 단시간에 수행하여 에러를 발견하고 결과보고서를 자동으로 생성하기 때문에 개발 시스템의 품질향상을 도모할 수 있다.

본 발명의 일 실시예에 따른 개발시스템의 테스트 자동화시스템은 키 스트로크 형태의 테스트방식을 지양하여 테스트 시간을 절약할 수 있다.

본 발명의 일 실시예에 따른 개발시스템의 테스트 자동화시스템은 테스트케 이스의 일괄 수행으로 테스트 생산성을 향상할 수 있다.

이하 본 발명의 일 실시예에 따른 품질테스트자동화시스템에 대하여 첨부된 도면을 참조하여 상세히 설명한다.

우선 각 도면의 구성요소들에 대해 참조부호를 부가함에 있어서, 동일한 구성요소들에 한해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호로 표기한다.

또한, 하기의 설명에서는 본 발명의 실시 예를 설명하기 위하여 구체적인 구성소자 등과 같은 많은 특정사항들이 도시되어 있는데, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐 이러한 특정 사항들 없이도 본 발명이 실시될 수 있음은 이 기술분야에서 통상의 지식을 가진 자에게는 자명하다 할 것이다.

본 명세서에 있어서, 테스트 웹 단말기는 요구불거래를 실행하는 프로그램이 실행되는 영업점 창구단말기를 예를 들어 설명하였지만, 이에 한정되는 것은 아니며, 모바일 뱅킹이 실행되는 휴대용 단말기, 인터텟 뱅킹이 실행되는 고객단말기, CD/ATM기, 콜센터 단말기 등 금융기관의 IT 시스템과 연결된 다양한 채널과 인터페이스되는 단말기일 수 있다.

본 발명은 테스트자동화시스템은 통합기능테스트를 자동화하는 것으로 금융기관의 웹 단말과 같이 다양한 채널에 연결되는 시스템에 있어서 조작자의 조작(Action) 내용만 기억할 뿐 조작(Action)에 대한 각 업무프로그램 내부의 동작 (이를 블랙박스라고 칭함)을 모르는 채 수행되는 블랙박스테스트를 자동화한 것이다.

도 1은 본 발명의 일 실시예에 따른 품질테스트자동화시스템의 블록도이며, 도 2는 본 발명의 일 실시예에 따른 품질테스트자동화시스템의 테스트자동화엔진의 구성을 자세히 보이는 블록도이다.

본 발명의 일 실시예에 따른 품질테스트자동화시스템(1)은 개발시스템의 웹 단말 프로그램을 실행하는 웹 단말기(10)와, 상기 웹 단말기(10)를 통해 개발시스템의 웹 단말 프로그램이 구동되면 웹 단말기(10)를 통한 데이터 처리, 예를 들어, 요구불거래를 처리하는 호스트 시스템(20)을 포함한다. 상기 호스트 시스템(20)은 거래를 처리하는 계정계시스템(21)과 상기 계정계시스테(21)의 처리결과를 고객정보와 함께 저장하는 저널로그 데이터베이스(23)을 더 포함할 수 있다.

이와 같이 데이터 처리를 진행하는 데에는 웹 단말기(10)를 통한 데이터 처리에 필요한 데이터를 입출력하기 위한 단말 주변기기(30)와, 경우에 따라 신용평가정보나, 다른 업무와의 연계, 공인인증 등의 필요로 신용평가기관, 은행연합회, B2B 연계, 금융결제원 서버(40)의 지원이 필요하다.

상기 단말 주변기기(30)는 비밀번호를 입력하는 핀 패드(31), 신규거래 승인 시 직불 카드 발급 거래 시 직불 카드를 발급하는 직불카드 발급기(32), IC 리더기 발급기(33), 통장 프린트(34), 통장 리더기(35) 등을 들 수 있다.

상기 웹 단말기(10)의 웹 단말 프로그램(200)은 윈도우 기반으로JAVA, XML 등 표준 기술을 채택하여 솔루션의 유연성을 보장하며, Single View의 구현으로 한 화면에서 다양한 금융 업무의 수행이 가능하도록 하고 업무간 유연한 데이터 연동으로 업무 처리의 효율 향상하고, 상기 단말 주변기기 처리, 책임자 승인, 메시지 송/수신의 통합 관리, SSO 구현을 통한 보안 강화, 일원화된 사용자 관리로 사용자별 맞춤화 기능 지원할 수 있고, 고객 정보(CRM 연계)의 효율적 활용으로 마케팅 중심의 업무 지원할 수 있으며, 중앙 집중적인 변경 관리 및 체계적인 개발 방법론에 의한 엄격한 테스트를 수행할 수 있도록 구성된다.

본 발명의 일 실시예에 따른 품질테스트자동화엔진(100)은 사용자가 조작한 내용을 그대로 레코딩 하였다가 재생하는 개발시스템의 단말프로그램 테스트자동화모듈(110)을 포함한다.

본 명세서에 있어서 사용자란 창구 텔러를 의미하는 것으로, 창구 텔러가 조작한 내용은 예를 들어 요구불거래와 같은 거래를 처리한 것을 저장한 저널로그를 테스트케이스로 이용할 수 있다. "테스트케이스"란 테스트를 하여 결과값을 얻을 수 있는 최소단위를 의미한다.

이와 같이 저널로그를 테스트케이스로 이용하기 위해서 품질테스트자동화엔진(100)은 저널로그를 수집, 편집하여 테스트케이스로 만들어 일괄적으로 테스트에 이용할 수 있는 저널로그자동화모듈(120)을 더 포함한다.

또한, 상기 조작한 내용을 그대로 레코딩 한다는 것은 마우스 조작 및 키보드 입력뿐만 아니라 각종 디바이스 장비조작 까지도 포함하는 것으로, 품질테스트 자동화엔진(100)는 요구불거래와 같은 금융거래에 필요한 비밀번호입력, 통장인자, 직불카드발행과 같은 단말 주변기기의 실행을 자동화하여 일괄적으로 테스트해 볼 수 있도록 디바이스 자동화모듈(130)을 더 포함한다.

또한, 조작자가 웹 단말기(10)를 인터페이스하여 웹단말 프로그램(200)을 통해 거래를 할 때 책임자 승인이 필요한 경우가 있다. 일반적으로 책임자 승인은 조작자가 책임자 단말에 승인요청을 전송하면, 책임자는 요청 받은 거래를 확인 후 비밀번호를 입력하여 승인을 해야 하는 것으로, 한 화면에서 거래를 일괄적으로 수행할 수 없으며, 대기시간이 필요한 문제점이 있다.

이러한 책임자 승인을 자동화 하기 위하여 품질테스트 자동화엔진(100)는 책임자 승인요청이 들어오면 자동으로 책임자 비밀번호를 입력한 뒤 조작자 단말에 돌려주어 자동책임자 승인을 할 수 있는 책임자승인 자동화모듈(140)을 포함한다.

이와 같이 일괄적인 거래가 테스트된 테스트케이스는 집합되어 테스트시나리오를 구성할 수 있다.

또한, 상기 품질테스트 자동화엔진(100)는 테스트케이스의 결과값을 이용하여 자동으로 결과보고서를 만드는 결과보고자동화모듈(150)를 포함할 수 있다

이제, 도 3 내지 도 5b를 참조하여 본 발명의 일 실시예에 따른 품질테스트 자동화 엔진(100) 및 그 작동방법에 관해서 상세히 설명하겠다.

도 3은 본 발명의 일 실시예에 따른 품질테스트자동화방법을 설명하는 플로우챠트이고, 도 4는 본 발명의 일 실시예에 따른 레코딩 및 리플레이 과정을 설명하는 개념도이고, 도 5a 및 도 5b는 본 발명의 일 실시예에 따른 레코드 및 리플레이 화면을 보이는 화면예시도이다.

먼저, 도 3 내지 도 5b를 참조하면, 테스트 웹 단말기(10)는 웹 단말 프로그 램(200)이 요구불 입금거래인 경우를 예를 들어 설명하면, 웹 단말기(10)를 통해서 요구불 거래를 선택하고 계좌번호를 도 5a에 도시된 바와 같이 입력하면 이를 수신하고(S10), 조작자가 실행하는 단말프로그램의 동작을 입력되는 대로, 보여지는 출력 그대로 도 5b에 도시된 바와 같이 스크립트 방식으로 기록한다(S20).　 상기 스크립트 방식은 컴퓨터 언어구조를 가진 입출력 방식으로 조작내용을 편집할 수 있도록 정규화되며, 레코딩 단계에서 생성된 스크립트는 재생이 가능하도록 입출력 정보에 대한 내용을 저장한다(S21).

이를 위하여, 단말프로그램 테스트 자동화모듈(110)는 그 구성요소를 윈도우 체계의 웹 단말프로그램(200)과 연동하도록 제어하는 주제어기(WinTAS Main;111)와, 조작자가 실행하는 단말프로그램의 동작을 입력되는 대로, 보여지는 출력 그대로 스크립트방식으로 기록하는 스크립트편집기(112), 상기 스크립트편집기(112)에 의해서 작성된 스크립트를 테스트케이스로 생성하는 테스트케이스 생성기(113)를 포함하며, 상기 테스트케이스 생성기(113)에 의해서 생성된 테스트케이스는 반복 테스트의 자료로 활용할 수 있도록 테스트케이스 데이터베이스(116)에 저장된다.

한편, 상기 스크립트 편집기(112)는 레코딩된 스크립트가 재생 가능하도록 레코딩 과정에서 발생하는 XML형식(웹상에서 구조화된 문서를 전송 가능하도록 설계된 표준화된 텍스트 형식으로 HTML의 한계를 극복하고 SGML의 복잡함을 해결하는 방안으로써 HTML에 사용자가 새로운 태그를 정의할 수 있음)의 윈도우 메시지를 사용자가 직관적으로 이해할 수 있는 스크립트(script)로 사전 정의해 둔 정의부(112a), 이러한 스크립트를 라인번호입력으로 이동, 바꾸기, 복사, 잘라내기, 붙 여넣기, Copy Documentation to Clipboard, Undo/Redo, BreakPoint Insert/Delete(한 단계를 중단하고 다음단계로 진행하도록 함), Syntax Highlighting 할 수 있는 스크립트에디터(112b), 스크립트 문법오류를 검사하는 검증부(112c), 스크립트로　테스트케이스를 생성하는 생성부(112d), 주변기기 및 저널로그의 입출력을 스크립트로 기록하는 디바이스스크립부(112e) 및 저널로그스크립트부(112f)를 더 포함할 수 있다.

도 4에 도시된 바와 같이, 레코딩 과정에서 발생한 메시지를 XML 형식으로 스크립트에디터(112b)에 전달하면, 상기 XML메시지를 파싱(parsing)하여 스크립트를 생성하고 Syntax Highlighting 정보를 설정하여 한 줄 추가하여 표시한다.

이러한 스크립트에디터(112b)를 이용하여 스크립트를 다양하게 편집하여 데스트케이스를 생성부(112c)에 의해서 생성하고 상기 스크립트 확인부(112d)를 통해서 테스트케이스 스크립트 데이터베이스(116)에 저장한다.

상기 스크립트 중 테스트 자동화엔진(100)과 통신하는 부분을 더미로 바꾸어 JavaScript부분만 웹 브라우저로 실행하면, 별도의 검증엔진을 구성하지 않더라도 기존 표준화된 프로그램을 이용하여 문법오류를 편리하게 검사할 수 있다.

이를 위하여 단말 프로그램 자동화엔진(110)는 자바제어 매니저(114)를 더 포함하며, 다른 프로세스에 걸려서(Hooked) 해당 프로세스의 정보를 얻어 오거나, 변경할 수 있도록 지원하는 후킹부(114a)와 자바스크립트를 XML 변환하는 XML 생성기(114b)를 포함하여, 상기 테스트케이스 데이터베이스(116)에 저장된 테스트케이스의 재실행(replay)시에 XML 문서로 전송할 수 있다.

상기 테스트케이스데이터베이스(116)에 저장된 테스트케이스는 자동 재수행되어(S22) 웹 단말 프로그램(200)을 실행하도록 명령을 전송한다(S30).

이때, 통장 발급기(35)와 같은 주변기기가 실행하는 것과 마찬가지로 상기 디바이스자동화모듈(130)이 대신 처리한 결과를 전송한다(S41).

상기 디바이스자동화모듈(130)은 가상 드라이버를 구축하여 임베디드보드를 USB 디바이스로 인식하여 단말프로그램의 조작자의 행동을 기록하는 것을 가지고 똑같이 재현함으로써 주변장비가 실제 존재(연결되어 있지)하지 않고 디바이스 콘트롤러에 의해서만 동작하는 모드로 설정되더라도 윈도우 테스트 프로그램을 시행할 수 있기 때문에 일괄적인 리얼테스트를 가능하게 한다.

한편, 테스트결과보고자동화모듈(150)은 테스트 결과를 수집하고(S50), 테스트 결과를 판단할 체크 포인트를 제공하는 체크포인트제공부를 이용하여 출력화면의 체크 포인트에 해당하는 내용을 비교 검증하여 테스트결과 데이터베이스(116)에 저장하고 테스트결과검색부(151)에 의하여 검색할 수도 있으며 결과보고서인쇄부(152)에 의하여 스냅샷 프린트에 의하여 자동으로 테스트 수행결과보고서를 보고한다(S60).

상기 테스트결과보고자동화모듈은 테스트 결과의 판단할 기준을 제공하는 체크포인트제공부를 더 포함할 수 있다.

한편, 상기 재실행은 도 4에 도시된 바와 같이 기록시에 사용되었던 입력 값을 그대로 활용할 수도 있으며, BP에 저장된 로그에 입력 부분만을 저널로그스크립부(114f)로 추출하여 반복 테스트의 자료로 활용하는 테스트케이스를 생성하여 수 행할 수 도 있다.

이때, 레코딩 순서 그대로를 재생하려면 디바이스 동작과 단말기 동작 간의 순서를 동기화 해야 하는데, 테스트 자동화 엔진(100)은 단말기 프로그램이 어느 시점에 디바이스를 동작시키는지 알 수 있도록 디바이스 자동화모듈(; 임베디드 장비130)을 단말기와 디바이스 중간에 위치시켜 동작들을 가로채고 스크립트화 하여 기록하게 한다.

상기 테스트보고서인쇄부(152)는 테스트자동화 프로그램의 결과보고서를 실행한다.

상기 테스트보고서인쇄부(152)는 별도의 실행파일로 존재할 수도 있으며, 보고자 하는 보고서 파일을 상기 테스트보고서검색부(151)에 의하여 선택할 수도 있으며 이때 결과내용을 DB에 저장한다.

상기 결과내용은 메인결과(테스트시나리오), 데이터테이블(여러 건의 입력데이터), 테스트케이스별 결과, 해당 테스트케이스의 스크립트 라인별 결과(체크포인트 포함)[테이블, xml파일 구성 및 내용] 메인테이블, 파일 테스트 시나리오 단계를 표현할 수도 있다.

상기 결과내용은 마스터 테이블 성격을 가지며 테스트 케이스들을 포함 할 수 있다. 따라서, 테스트케이스 테이블, 파일 독립적인 테스트 케이스 항목은 생성이 가능하며, 메인테이블에 종속 되어 실행된다. 상기 스크립트 테이블, 파일 테스트케이스는 종속되어 독립적으로 구성될 수 없다.

상기 스크립트는 라인단위로 생성된다. 상기 스크립트 라인단위의 속성이 정 의되어 있다. 상기 스크립트 속성 테이블, 파일 독립적으로 구성된다. 상기 스크립트는 스크립트별 속성, 예컨대 성공, 패스, 실패, 경고 등이 DB로 저장될 경우 관련 데이터를 테이블에 저장한다.

이러한 결과 화면은 도 6a 및 도 6b에 도시된 바와 같다.

도 6a 및 도 6b는 본 발명의 일 실시예에 따라 자동생성되는 결과보고서의 화면예시도이다.

도 6a 및 도 6b에 도시된 바와 같이, 화면종류는 메인화면(테스트시나리오), 데이터테이블 화면, 테스트케이스 메인화면, 스크립트 라인별 화면, 체크포인트 화면, 에러화면, 좌우 프레임으로 나뉘어 왼쪽에는 트리구조, 오른쪽에는 각 노드 별 상세내용이 표현될 수 있다.

상기 결과 메인 화면에는 테스트 케이스 명, 테스터 아이디 혹은 이름, 작업 시작시간, 작업 종료시간이 표시될 수도 있다.

여러 건의 데이터를 반복 테스트할 수 있기 때문에 반복횟수를 표시해 줄 수도 있다.

전체 테스트 중에 ‘성공’,’패스’,’실패’,’경고’의 횟수를 표시할 수도 있다.

여러 건의 테스트가 있을 경우 각 건 별로 결과를 볼 수 있게 표시할 수도 있다.

각 건당 이름이 존재하며, 이러한 이름은 자동으로 생성될 수도 있다.

에러 발생시 좌측 리스트에 어떠한 에러인지 표현을 하며, 에러 항목을 선택 시 해당개체명과 에러내용과 실행 시간이 표시될 수도 있다.

건별 결과 보기 화면으로 이동하면 건별 결과를 보여줄 수 있으며, 각 건 별 이름 및 결과, 시작시간, 종료시간이 보이고, 좌측 프레임에는 각 스크립트 라인별 리스트가 표시될 수 있다.

라인별 리스트를 선택하면, 해당라인의 개체명과 액션 결과 실행 시간이 보일 수 있다.

도 1은 본 발명의 일 실시예에 따른 품질테스트자동화시스템의블록도이다.

도 2는 본 발명의 일 실시예에 따른 품질테스트자동화시스템의 테스트자동화엔진의 구성을 자세히 보이는 블록도이다.

도 3은 본 발명의 일 실시예에 따른 품질테스트 자동화방버를 설명하는 플로우챠트이다.

도 4는 본 발명의 일 실시예에 따른 레코딩 및 리플레이 과정을 설명하는 개념도이다.

도 5a 및 도 5b는 각각 본 발명의 일 실시예에 따른 레코드 및 리플레이 화면을 보이는 화면예시도이다.

도 6a 및 도 6b는 각각 본 발명의 일 실시예에 따라 자동생성되는 결과보고서의 화면예시도이다.

Claims (11)

1. 개발시스템의 웹 단말 프로그램을 실행하기 위한 웹 단말기 상에서 발생하는 이벤트를 레코딩하기 위한 레코딩부와 상기 레코딩부에서 생성한 테스트케이스를 이용해서 상기 개발 시스템의 웹 단말 프로그램을 자동 일괄 실행하는 재생부를 갖는 품질테스트자동화엔진;

   상기 웹 단말기가 웹 단말 프로그램을 반복적으로 수행할 수 있도록 상기 테스트케이스를 저장하는 테스트케이스 데이터베이스; 및

   상기 재생부에서 재실행된 테스트 결과를 검증, 분석 및 리포팅하는 테스트 결과보고 자동화모듈을 포함하며,

   상기 테스트 결과보고 자동화모듈에 의해서 상기 웹 단말기에 표시되는 화면은, 메인화면(테스트시나리오), 데이터테이블 화면, 테스트케이스 메인화면, 스크립트 라인별 화면, 체크포인트 화면, 에러화면 중 적어도 하나이며,

   상기 화면은 좌우 프레임으로 나뉘어 왼쪽에는 트리구조, 오른쪽에는 각 노드 별 상세내용이 표현되고,

   상기 결과 메인 화면에는 테스트 케이스 명, 테스터 아이디 혹은 이름, 작업 시작시간, 작업 종료시간, 반복회수, 전체 테스트 중에 ‘성공’,’패스’,’실패’,’경고’의 횟수가 표시되는 품질테스트자동화시스템.
2. 제 1 항에 있어서,

   상기 품질테스트자동화엔진은 사용자가 조작한 내용을 그대로 레코딩 하였다가 재생하는 단말프로그램 테스트자동화모듈과, 저널로그를 이용하여 테스트케이스를 자동으로 생성하는 저널로그 자동화모듈과, 주변 단말기기 대신에 임베디드보드를 인식하여 주변 단말기기의 작동을 자동으로 실행하는 디바이스자동화모듈과, 책임자 승인이 필요한 경우에 책임자승인을 자동으로 전송하는 책임자승인자동화모듈을 더 포함하는 품질테스트자동화시스템.
3. 제 2 항에 있어서,

   상기 단말프로그램 테스트 자동화모듈은 레코딩 과정에서 발생하는 XML형식 윈도우 메시지를 스크립트(script)로 사전 정의해 두는 정의부, 상기 스크립트를 편집하는 스크립트에디터, 스크립트 문법오류를 검사하는 검증부, 및 스크립트로 상기 테스트케이스를 생성하는 스크립트 레코딩부를 포함하는 품질테스트자동화시스템.
4. 제 3 항에 있어서,

   상기 스크립트 에디터는 라인 번호입력으로 이동, 바꾸기, 복사, 잘라내기, 붙여넣기, Copy Documentation to Clipboard, Undo/Redo, BreakPoint Insert/Delete(한 단계를 중단하고 다음단계로 진행하도록 함), Syntax Highlighting 수단을 포함하는 품질테스트자동화시스템.
5. 제 2 항에 있어서,

   상기 단말프로그램 테스트 자동화모듈은 다른 프로세스를 걸어서(Hooked) 해당 프로세스의 정보를 얻어 오거나, 변경할 수 있도록 지원하는 후킹부와 자바스크립트를 XML 변환하는 XML 재생부를 포함하는 품질테스트자동화시스템.
6. 제 1 항에 있어서,

   상기 테스트결과보고자동화모듈은 상기 재생부가 상기 레코딩부에서 녹화한 데이터를 이용해서 상기 개발 시스템의 웹 단말 프로그램을 자동 일괄 실행할 때, 테스트결과값을 판단할 기준을 제공하는 체크포인트제공부와, 스냅샷 프린트에 의하여 자동으로 테스트결과를 자동으로 표시하는 테스트보고서인쇄부를 포함하는 품질테스트자동화시스템.
7. 삭제
8. 삭제
9. 개발 시스템의 웹 단말 프로그램이 실행되는 웹 단말기를 통해 테스트케이스가 수신되는 단계와,

   상기 웹 단말기가 실행하는 상기 개발 시스템의 웹 단말 프로그램의 동작을 입력되는 대로, 보여지는 출력 그대로 스크립트로 기록하는 단계와,

   스크립트에디터를 이용하여 상기 스크립트를 다양하게 편집하여 테스트케이스 데이터베이스에 저장하는 단계와,

   상기 테스트케이스 데이터베이스에 저장된 상기 테스트케이스를 일괄 수행하는 재생단계와,

   상기 일괄 수행된 테스트케이스의 테스트 결과를 자동으로 테스트 결과보고서를 작성하는 단계를 포함하며,

   상기 테스트 결과보고서 작성하는 단계는 상기 웹 단말기에 메인화면(테스트시나리오), 데이터테이블 화면, 테스트케이스 메인화면, 스크립트 라인별 화면, 체크포인트 화면, 에러화면 중 적어도 하나에 표시하며,

   상기 화면은 좌우 프레임으로 나뉘어 왼쪽에는 트리구조, 오른쪽에는 각 노드 별 상세내용이 표현되고,

   상기 메인 화면에는 테스트 케이스 명, 테스터 아이디 혹은 이름, 작업 시작시간, 작업 종료시간, 반복회수, 전체 테스트 중에 ‘성공’,’패스’,’실패’,’경고’의 횟수가 표시되는

   품질테스트자동화방법.
10. 제 9 항에 있어서,

    상기 웹 단말 프로그램가 실행될 때, 임베디드 장비를 이용하여 주변기기 대신에 가상 작동신호를 수신하는 단계와,

    책임자 승인 요청을 하는 경우에 자동으로 책임자 승인이 수신되는 단계를 포함하는 품질테스트자동화방법.
11. 제 9 항에 있어서,

    상기 테스트케이스 데이터베이스에 저장하는 단계는 레코팅부에서 재생단계는 XML 형식 파일로 상기 테스트케이스 데이터베이스에 저장되는 품질테스트자동화방법.

Images