KR20150030297A - Verification apparatus, terminal device, system, method and computer-readable medium for verifying application - Google Patents
Verification apparatus, terminal device, system, method and computer-readable medium for verifying application Download PDFInfo
- Publication number
- KR20150030297A KR20150030297A KR20130108885A KR20130108885A KR20150030297A KR 20150030297 A KR20150030297 A KR 20150030297A KR 20130108885 A KR20130108885 A KR 20130108885A KR 20130108885 A KR20130108885 A KR 20130108885A KR 20150030297 A KR20150030297 A KR 20150030297A
- Authority
- KR
- South Korea
- Prior art keywords
- group
- terminal
- work
- information
- script
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3696—Methods or tools to render software testable
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
Description
본 발명은 애플리케이션 자동 검증을 위한 검증장치, 단말장치, 시스템, 방법 및 컴퓨터로 판독 가능한 기록 매체에 관한 것으로, 보다 상세하게는 작업(work)이라는 단위에 실행해야 할 단말장치 및 스크립트를 지정하고, 각 작업을 실제 단말장치에 할당하며, 단말장치로부터 상태정보를 수집하여 분석하는 장치, 시스템, 방법 및 컴퓨터로 판독 가능한 기록매체에 관한 것이다.
The present invention relates to a verification apparatus, a terminal apparatus, a system, a method, and a computer-readable recording medium for automatically verifying an application. More specifically, the present invention relates to a verification apparatus, An apparatus, a system, a method, and a computer-readable recording medium for collecting and analyzing status information from a terminal apparatus, and assigning each task to an actual terminal apparatus.
애플리케이션 테스트란 애플리케이션이 규정된 요구사항을 만족시키고 있는지 검증하고, 기대되는 결과와 실제 결과와의 차이를 식별하기 위해 애플리케이션 시스템 전체 또는 일부의 구성요소를 실행하고 평가하는 과정이다. 예를 들어, 휴대폰, 스마트폰, PDA 등과 같은 무선통신단말기를 개발하는 과정에서, 개발자들은 자신이 개발한 단말기에 탑재된 애플리케이션이 통신시스템과 실제로 연동하여 정상적으로 작동하는지를 테스트하여야 한다. 그러한 테스트과정에서 오류가 발견되면 그 오류를 찾아서 원인을 분석하고 해결책을 찾아서 수정하는 과정을 거치게 된다.Application testing is the process of running and evaluating all or part of an application system to verify that an application meets specified requirements and to identify differences between expected and actual results. For example, in the process of developing a wireless communication terminal such as a mobile phone, a smart phone, a PDA, etc., developers should test whether an application installed in the terminal developed by the developer works in real operation with the communication system. If an error is found during such a test, it will be found by finding the error, analyzing the cause, and finding and correcting the solution.
종래의 애플리케이션 테스트 방식은 미리 준비된 테스트 케이스만을 이용해서 애플리케이션을 테스트한다. 이러한 테스트 케이스는 테스트 스크립트와 테스트 데이터를 포함하고 있기 때문에 결국 애플리케이션 테스트를 수행하기 전에 테스트를 위한 스크립트와 테스트 데이터가 모두 고정되어 있다.Conventional application test methods test an application using only a prepared test case. Since these test cases contain test scripts and test data, the script and test data for the test are all fixed before the application test is finally performed.
이러한 종래의 애플리케이션 테스트 방식에 따르면, 테스트 데이터가 고정되어 있기 때문에 테스트를 수행한 후 테스트가 불충분하거나 불완전한 부분이 발견되어도 이를 보완할 수 없으며, 테스트가 종료된 후에 별도의 분석을 통해서 새로운 테스트 데이터를 만들어야 하기 때문에 비용과 시간이 많이 소요되는 문제점이 있다.According to the conventional application test method, since the test data is fixed, if the test is insufficient or incomplete part is found after the test is performed, it can not be compensated. After the test is finished, new test data There is a problem in that it is costly and time consuming.
또한, 기존 자동 테스트의 경우 에러 발생시 바로 관리자에게 고지하거나, 정해진 정답을 테스트 대상과 비교하여, 각 회차에 따른 검증 이력을 로그로 남기는데, 이는 사람이 검증한 결과를 반영 및 병합을 할 수가 없어 관리에 불편함이 따른다.
In the case of the existing automatic test, the system notifies the administrator immediately when an error occurs, compares the correct answer with the test object, and logs the verification history according to each turn, which can not reflect and merge the result of the verification There is an inconvenience in management.
본 발명은 상술한 종래의 문제점을 해결하기 위한 것으로, 작업이라는 단위에 실행해야 할 단말장치 및 스크립트를 지정하고, 각 작업을 실제 단말장치에 할당 및 그 결과를 수집하기 위한 것이다. SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned conventional problems, and it is an object of the present invention to designate a terminal device and a script to be executed in units of a task, allocate each task to an actual terminal device, and collect the result.
본 발명은 기 제작된 자동 검증용 스크립트를 작업별, 단말장치 별로 나누어 분배하는 것을 목적으로 한다. The present invention aims at dividing the produced automatic verification script by task and terminal device.
본 발명은 동일한 조건의 테스트를 개별 설정 없이 그룹으로 진행하도록 하여, 검증 효율을 높이고자 하는 것을 목적으로 한다.
An object of the present invention is to increase the verification efficiency by allowing a group of tests under the same conditions to proceed without individual setting.
상술한 과제를 해결하기 위한 검증장치는 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 정보가 저장된 데이터베이스, 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보를 상기 데이터베이스에 등록하고, 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하며, 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배하는 통합 매니저, 단말장치로부터 스크립트 재생에 따른 상태 정보를 수신하고, 상기 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 분석 매니저를 포함할 수 있다. A verification apparatus for solving the above-mentioned problems registers group creation information for at least one of a database, a work group, a terminal group, and a script group in which information about at least one of a work group, a terminal group, and a script group is stored in the database , An integration manager for setting up a terminal group and a script group in each work group, distributing a script included in the script group to the terminals in the terminal group set in each work group, and status information on the script reproduction from the terminal And an analysis manager for analyzing the received status information and determining whether the work is normally operated.
본 발명의 통합 매니저는 상기 단말그룹내의 단말장치들 중에서 기준 단말장치 및 기준 데이터를 포함하는 기준 단말 정보를 설정할 수 있다. The integration manager of the present invention can set reference terminal information including a reference terminal device and reference data among the terminal devices in the terminal group.
본 발명의 분석 매니저는 상기 상태 정보의 화면정보와 기 저장된 뷰 트리(view tree) 정보를 상호 비교하여 일정 비율 이상 일치하지 않으면 실패 처리하여 에러가 발생한 것으로 판단할 수 있다. The analysis manager of the present invention compares the screen information of the status information with the previously stored view tree information, and if it does not coincide with the predetermined ratio or more, the analysis manager determines that an error has occurred.
한편, 본 발명의 단말장치는 검증장치로부터 스크립트 파일을 수신하는 통신부, 상기 통신부를 통해 수신된 스크립트 파일이 저장된 저장부, 상기 저장부에 저장된 스크립트 파일을 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 상기 수집된 상태 정보를 검증 장치로 전송하는 단말 제어부를 포함할 수 있다. 여기서, 상태정보는 단말정보, 시스템 리소스 정보, 화면 정보 중 적어도 하나를 포함할 수 있다. On the other hand, the terminal apparatus of the present invention collects state information that changes in real time while executing a script file stored in the storage unit, a communication unit that receives a script file from the verification apparatus, a storage unit that stores the script file received through the communication unit, And a terminal control unit for transmitting the collected status information to a verification apparatus. Here, the status information may include at least one of terminal information, system resource information, and screen information.
또한, 본 발명의 애플리케이션 자동 검증을 위한 시스템은 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보의 등록을 요청하는 관리자 단말장치, 상기 관리자 단말장치의 등록 요청에 따라, 상기 그룹 생성 정보를 데이터베이스에 등록하고, 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하며, 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배한 후, 단말장치로부터 스크립트 재생에 따른 상태 정보를 수신하고, 상기 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 검증장치, 상기 검증장치로부터 전송된 스크립트 파일을 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 상기 수집된 상태 정보를 상기 검증 장치로 전송하는 테스트 단말장치를 포함할 수 있다. According to another aspect of the present invention, there is provided a system for automatically verifying an application, the system comprising: an administrator terminal device that requests registration of group creation information for at least one of a work group, a terminal group, and a script group; Information is registered in the database, a terminal group and a script group are set in each work group, a script included in the script group is distributed to terminals in the terminal group set in each work group, A verification device for analyzing the received status information to determine whether the work is normally operated or not; a processor for collecting status information that changes in real time while executing a script file transmitted from the verification device, And transmitting the status information to the verification apparatus . ≪ / RTI >
관리자 단말장치는 각 워크 그룹에 할당할 단말그룹 및 스크립트 그룹, 해당 워크그룹의 워크 정보, 기준 단말정보 중 적어도 하나를 포함하는 워크 할당 정보를 입력받아 상기 검증장치로 전송할 수 있다. The administrator terminal device may receive work assignment information including at least one of a terminal group and a script group to be assigned to each work group, work information of the work group, and reference terminal information, and may transmit the work assignment information to the verification device.
또한, 본 발명의 검증장치가 애플리케이션 자동 검증을 위한 방법에 있어서, 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보를 등록하는 단계, 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하고, 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배하는 단계, 단말장치로부터 스크립트 재생에 따른 상태 정보가 수신된 경우, 상기 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 단계를 포함할 수 있다. Further, the verification apparatus of the present invention may include a step of registering group creation information for at least one of a work group, a terminal group, and a script group, setting a terminal group and a script group in each work group Distributing a script included in the script group to the terminal devices in the terminal group set in each work group; analyzing the received status information when receiving status information on the script reproduction from the terminal device, And judging whether or not the vehicle is normally driven.
본 발명에서 다양한 실시예로 기재된 애플리케이션 자동 검증을 위한 방법은 이를 실행하기 위한 프로그램이 수록된 컴퓨터로 판독 가능한 기록 매체에 수록되어 실시될 수 있다.A method for automatic application verification described in various embodiments in the present invention can be embodied in a computer-readable recording medium having embodied therein a program for executing the method.
또한, 본 발명의 애플리케이션 자동 검증을 위한 방법은 관리자 단말장치가 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보의 등록을 요청하는 단계, 검증장치가 관리자 단말장치의 등록 요청에 따라, 상기 그룹 생성 정보를 데이터베이스에 등록하는 단계, 상기 관리자 단말장치는 각 워크 그룹에 할당할 단말그룹 및 스크립트 그룹, 해당 워크그룹의 워크 정보, 기준 단말정보 중 적어도 하나를 포함하는 워크 할당 정보를 입력받아 상기 검증장치로 전송하는 단계, 상기 검증장치는 상기 워크 할당 정보에 따라 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하고, 해당 워크그룹의 워크 정보 또는 기준 단말정보를 저장하는 단계, 상기 검증장치는 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배하는 단계, 상기 검증장치로부터 스크립트를 수신한 단말장치는 상기 스크립트를 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 상기 수집된 상태 정보를 상기 검증 장치로 전송하는 단계, 상기 검증 장치는 단말장치로부터 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 단계를 포함할 수 있다.
According to another aspect of the present invention, there is provided a method for automatically verifying an application, the method comprising: requesting registration of group creation information for at least one of a work group, a terminal group, and a script group; And registering the group creation information in a database. The administrator terminal device inputs work allocation information including at least one of a terminal group and a script group to be assigned to each work group, work information of the work group, and reference terminal information And transmitting the verification information to the verification apparatus, wherein the verification apparatus sets a terminal group and a script group in each work group according to the work assignment information, and stores work information or reference terminal information of the work group, The terminal groups in the terminal group set in each work group are assigned to the corresponding script group The terminal device receiving the script from the verification device collects status information that changes in real time while executing the script and transmits the collected status information to the verification device; The verification apparatus may include a step of analyzing status information received from the terminal and determining whether the work is normally operated.
본 발명에 따르면, 작업이라는 단위에 실행해야 할 단말장치 및 스크립트를 지정하고, 각 작업을 실제 단말장치에 할당 및 그 결과를 수집함으로써, 동일한 조건의 테스트를 개별 설정 없이 그룹화로 진행할 수 있고, 이로 인해 검증 효율을 높일 수 있다.According to the present invention, a terminal apparatus and a script to be executed in a unit of a task are specified, each task is assigned to an actual terminal apparatus, and the result is collected, so that a test under the same condition can be grouped without individual setting, The verification efficiency can be increased.
또한, 기 제작된 자동 검증용 스크립트를 작업별, 단말 장치별로 나누어 분배함으로써, 테스트 버전이 바뀌어도 별도의 설정 없이 기존의 업무 그룹, 테스트 케이스의 재사용이 가능한 효과가 있다.In addition, by dividing the generated automatic verification script by task and terminal device, it is possible to reuse the existing task group and test case without any setting even if the test version is changed.
또한, 비교 대상이 되는 기준 단말장치의 변경이 용이하고, 단말장치의 애플리케이션 검증 결과를 수동 검증 담당자가 반영 및 병합할 수 있으므로, 애플리케이션 검증 결과의 관리가 편해지는 효과가 있다.In addition, since the reference terminal device to be compared can be easily changed, and the application verification result of the terminal device can be reflected and merged by the manual verification person in charge, the application verification result can be easily managed.
본 발명의 효과는 이상에서 언급한 효과들로 제한되지 않으며, 이하에서 설명할 내용으로부터 통상의 기술자에게 자명한 범위 내에서 다양한 효과들이 포함될 수 있다.
The effects of the present invention are not limited to the above-mentioned effects, and various effects can be included within the range that is obvious to a person skilled in the art from the following description.
도 1은 본 발명의 애플리케이션 자동 검증을 위한 시스템의 일 실시예를 나타낸 도면이다
도 2는 본 발명의 검증장치(20)의 일 실시예를 나타낸 블록도이다.
도 3은 본 발명의 단말장치의 일 실시예를 나타낸 블록도이다.
도 4는 본 발명의 애플리케이션 자동 검증을 위한 방법을 나타낸 도면이다.1 is a diagram illustrating an embodiment of a system for automatic application verification of the present invention
2 is a block diagram showing an embodiment of the
3 is a block diagram showing an embodiment of a terminal device of the present invention.
4 is a diagram illustrating a method for automatic application verification of the present invention.
본 발명의 전술한 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다.The foregoing and other objects, features, and advantages of the present invention will become more apparent from the following detailed description taken in conjunction with the accompanying drawings, in which: FIG.
도 1은 본 발명의 애플리케이션 자동 검증을 위한 시스템의 일 실시예를 나타낸 도면이다.1 is a diagram illustrating an embodiment of a system for automatic application verification of the present invention.
본 발명의 애플리케이션 자동 검증을 위한 시스템은 관리자 단말장치(100), 검증장치(200), 적어도 하나 이상의 단말장치(300)를 포함한다. A system for automatic application verification of the present invention includes an
관리자 단말장치(100)는 통신망을 통해 검증 장치(200)에 접속하고, 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보를 검증장치(200)에 등록한다. The
관리자 단말장치(100)는 각 워크 그룹에 할당할 단말그룹 및 스크립트 그룹, 해당 워크그룹의 워크 정보, 기준 단말정보 중 적어도 하나를 포함하는 워크 할당 정보를 입력받아 검증장치(200)로 전송한다. 여기서, 워크 정보는 해당 작업을 위한 상세 내역 또는 값 등을 포함할 수 있고, 기준 단말정보는 단말그룹의 단말장치들 중에서 기준단말장치와 기준 데이터를 포함할 수 있다. 기준 데이터는 화면정보, 각종 실행 정보 등을 포함할 수 있다. The
이처럼 관리자 단말장치(100)는 작업이라는 단위에 실행해야 할 단말장치, 스크립트를 지정한다. As described above, the
검증장치(200)는 관리자 단말장치(100)로부터 전송된 그룹 생성 정보 등록 요청에 따라 그룹 생성 정보를 데이터베이스에 등록한다. The
검증장치(200)는 관리자 단말장치(100)로부터 전송된 워크 할당 정보에 따라 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하고, 해당 워크그룹의 워크 정보 또는 기준 단말정보를 저장한다. The
검증장치(200)는 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배하고, 단말장치(300)로부터 스크립트 재생에 따른 상태 정보가 수신된 경우, 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단한다. 이때, 검증 장치(200)는 단말장치(300)로부터 전송된 상태 정보를 기 저장된 뷰 트리 정보와 비교하고, 그 비교결과에 따른 자동검증수행 결과를 저장한다. 즉, 검증 장치(200)는 단말장치(300)로부터 수신한 상태정보로부터 기 정의된 뷰 트리 정보와 하나 이상의 동일한 속성을 가지는 대상 뷰를 탐색하여, 해당 뷰에 대한 검증을 실시하는 기능을 한다. 뷰(view)란 단말기의 출력창을 통해 표시되는 애플리케이션 컨텐츠의 구성요소를 표시하는 프레임으로서 버튼, 텍스트 필드, 체크박스 등의 다양한 애플리케이션 구성요소를 표시할 수 있는 단위프레임을 말한다. 본 발명을 실시함에 있어, 뷰는 애플리케이션 검증시 기준이 되는 것이며, 본 발명은 검증하고자 하는 애플리케이션의 뷰와 현재 단말장치 상의 실행되고 있는 뷰를 비교하여 가장 유사한 뷰를 탐색함으로써 애플리케이션을 검증하는 작업을 수행한다.The
이처럼 검증장치(200)는 관리자 단말장치(100)에 의해 지정된 각 작업을 실제 단말장치에 할당하고, 그 결과를 수집한다.As described above, the
이러한 검증 장치(200)에 대한 상세한 설명은 도 2를 참조하기로 한다.A detailed description of this
단말장치(300)는 검증장치(200)로부터 전송된 스크립트 파일을 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 수집된 상태 정보를 검증 장치(200)로 전송한다. 여기서, 상태정보는 각종 실행 정보, 화면 정보 등을 포함할 수 있고, 각종 실행정보는 단말정보, 시스템 리소스 정보 등을 포함할 수 있다. 단말정보는 단말 규격, 실행시간, 네트워크 사용량 등을 포함하고, 시스템 리소스 정보는 CPU사용량, 메모리 사용량, 네트워크 사용량, 실행 서비스 목록, 프로세스 종료 등을 포함할 수 있다.The
단말장치(300)는 검증하고자 하는 애플리케이션을 실행시키고, 애플리케이션 실행에 따른 화면정보를 상태 정보로 검증 장치(200)로 전송하는 기능을 수행한다.The
한편, 복수개의 단말장치(300)들은 각각 상이한 하드웨어 또는 소프트웨어를 구비한 것으로서, 동일한 애플리케이션을 실행시켰을 시 각각의 단말장치에서 올바르게 동작하는지를 비교할 수 있도록 함이 바람직하다.On the other hand, it is preferable that the plurality of
또한, 단말장치(300)에서 검증 장치(200)로 전송되는 상태정보는 바람직하게는 스크립트로 작성된 것으로서, 해당 애플리케이션의 컨텐츠를 구성하는 구성요소들을 개별적으로 파싱하여 구분할 수 있는 언어로 작성될 수 있다.The status information transmitted from the
상기와 같은 구성으로 단말장치(300)는 할당된 워크(work)를 실행하면서 실시간으로 변화하는 상태정보를 검증 장치(200)로 전송하고, 검증 장치(200)는 단말장치(300)로부터 전송된 상태 정보를 근거로 단말장치(300)에서 워크가 정상적으로 구동되는지를 실시간으로 판단할 수 있다. The
도 2는 본 발명의 검증장치(200)의 일 실시예를 나타낸 블록도이다. 2 is a block diagram showing an embodiment of the
본 발명의 검증장치(200)는 통합 매니저(210), 분석 매니저(220), 데이터베이스(230), 출력부(240)를 포함한다.The
통합 매니저(210)는 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보를 데이터베이스(230)에 등록하고, 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하며, 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배한다. The
통합 매니저(210)는 관리자 단말장치로부터 애플리케이션 및 테스트 케이스의 등록이 요청된 경우, 애플리케이션 및 테스트 케이스를 데이터베이스(230)에 등록한다. 여기서, 테스트 케이스는 측정 가능한 상태에 대한 정보, 상황(condition), 이벤트(event), 입출력 값 등을 포함하는 데이터로 구성되어 있다.The
통합 매니저(210)는 관리자 단말장치로부터 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보가 수신된 경우, 그룹 생성정보를 데이터베이스(230)에 저장한다. 여기서, 스크립트란 애플리케이션을 검증하기 위한 일련의 검증 시나리오를 작성한 것으로서, 스크립트는 사용자가 임의로 작성하여 생성하거나 기존에 생성되어 있던 스크립트를 타 서버로부터 다운로드(수신)하여 이용할 수 있다. 스크립트는 테스트용 명령어들의 집합으로 이루어지며, 본 발명에 따른 애플리케이션 검증은 스크립트에 포함된 검증 시나리오에 따라 이루어진다.The
통합 매니저(210)는 관리자 단말장치로부터 각 워크 그룹에 할당할 단말그룹 및 스크립트 그룹, 해당 워크그룹의 워크 정보, 기준 단말정보 중 적어도 하나를 포함하는 워크 할당 정보가 수신된 경우, 워크 할당 정보에 따라 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하고, 해당 워크그룹의 워크 정보 또는 기준 단말정보를 저장한다.When the
분석 매니저(220)는 단말장치로부터 스크립트 재생에 따른 상태 정보를 수신하고, 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단한다. 예컨대, 분석 매니저(220)는 수집된 상태 정보의 화면정보와 기 저장된 뷰 트리(view tree) 정보를 상호 비교하여, 일정 비율 이상 일치하면 해당 워크가 정상 구동하는 것으로 판단하고, 일정 비율 이상 일치하지 않으면 해당 워크가 정상 구동하지 않는 것으로 판단한다. The
이처럼 분석 매니저(220)는 테스트 단말장치에서 실행 중인 워크(서비스)가 정상적으로 구동되는지를 실질적으로 검증하는 기능부로서, 해당 서비스 애플리케이션 내 특정 뷰를 탐색해 내고, 해당 뷰에 대한 테스트 항목을 검사한다.As described above, the
구체적으로, 분석 매니저(220)는 테스트 단말장치로부터 전송된 상태 정보내 화면정보와 유사한 대상 뷰를 기 정의된 뷰 트리 정보로부터 탐색하고, 탐색된 대상 뷰에 대해 하나 이상의 테스트 항목 검사를 수행한다. 특히, 사용자는 화면정보 기준 설정값을 미리 설정해 둘 수 있으며, 상태정보의 화면정보와 뷰 트리 정보로부터 추출된 대상 뷰를 비교하여 기준 설정값에 비해 일치도가 낮은 경우 실패, 또는 기준 설정값에 비해 일치도가 높은 경우에는 성공한 것으로 판단하도록 설정할 수 있다.Specifically, the
데이터베이스(230)에는 애플리케이션, 테스트 케이스, 그룹 생성 정보 등이 저장되어 있다. 또한 데이터베이스(230)에는 스크립트 파일, 테스트 단말장치의 상태정보, 자동 검증 수행 결과 등이 저장되어 있다. 여기서, 자동 검증 수행 결과는 테스트 단말장치에서 실행중인 워크의 정상 구동 여부에 대한 정보를 포함할 수 있고, 정상 구동 여부에 대한 정보는 에러 발생 여부, 에러가 발생한 경우 에러 발생 정보 등을 포함할 수 있다. The
또한, 데이터베이스(230)에는 각 테스트 단말장치에 할당된 워크 정보가 저장되어 있다.In the
출력부(240)는 분석 매니저(220)에서 분석된 자동 검증 수행 결과를 출력할 수 있다. 출력부(240)는 시각적으로 확인 가능한 디스플레이의 형태가 될 수도 있고, 스피커 등 청각적으로 확인 가능한 형태일수도 있으며, 그 밖에 비교 결과를 확인할 수 있는 모든 형태를 포함한다.The
도 3은 본 발명의 단말장치(300)의 일 실시예를 나타낸 블록도이다.3 is a block diagram showing an embodiment of the
본 발명의 단말장치(300)는 검증장치로부터 스크립트 파일을 수신하는 통신부(310), 사용자 인터페이스부(320), 저장부(330), 단말 제어부(340)를 포함한다. The
사용자 인터페이스부(320)는 사용자 명령을 입력받는 입력부 또는 사용자 명령을 출력하는 출력부로 동작할 수 있다.The
저장부(330)에는 자동 검증을 위한 스크립트가 저장되어 있다. 이 때, 스크립트란 애플리케이션을 검증하기 위한 일련의 검증 시나리오를 작성한 것으로서, 스크립트는 사용자가 임의로 작성하여 생성하거나 기존에 생성되어 있던 스크립트를 타 서버로부터 다운로드(수신)하여 이용할 수 있다. 스크립트는 테스트용 명령어들의 집합으로 이루어지며, 본 발명에 따른 애플리케이션 검증은 상기 스크립트에 포함된 검증 시나리오에 따라 이루어진다.The
저장부(330)에는 앱 자동 검증 애플리케이션을 포함하는 다양한 애플리케이션들이 저장되어 있다. The
단말 제어부(340)는 저장부(330)에 저장된 스크립트 파일을 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 수집된 상태 정보를 통신부(310)를 통해 검증 장치로 전송한다. The
즉, 단말 제어부(340)는 검증 장치에 할당된 워크 정보를 조회하고, 할당된 워크 정보를 실행하기 위한 애플리케이션이 저장부(330)에 저장되어 있는지의 여부를 확인하여, 해당 애플리케이션이 저장된 경우, 스크립트를 실행한다. That is, the
단말 제어부(340)는 스크립트 실행 시 상태 정보를 수집하고, 수집된 상태 정보를 검증 장치로 전송한다. 여기서, 상태 정보는 각종 실행 정보, 화면 정보 등을 포함할 수 있고, 각종 실행정보는 단말정보, 시스템 리소스 정보 등을 포함할 수 있다. 단말정보는 단말 규격, 실행시간, 네트워크 사용량 등을 포함하고, 시스템 리소스 정보는 CPU사용량, 메모리 사용량, 네트워크 사용량, 실행 서비스 목록, 프로세스 종료 등을 포함할 수 있다.The
즉, 자동검증을 위해 기 제작된 스크립트를 재생하면, 단말 제어부(340)는 단말자체적으로 다양한 상태 정보를 수집하게 된다. 주로, activity의 뷰(view) 속성 정보를 기반으로 Hierarchy를 뷰 트리(view tree)로 저장하고 스크립트 녹화 시 사용자 입력 이벤트와 뷰 트리의 개별 화면(idx)들을 조합하여 정보를 저장한다. That is, when reproducing the prepared script for the automatic verification, the
단말 제어부(340)는 기 제작된 스크립트를 일정 시간 간격으로 재생하면서 실시간으로 변화하는 상태 정보를 검증 장치로 전송한다. 그러면, 검증 장치는 상태 정보를 근거로 워크가 정상적으로 구동되는지를 실시간으로 판단할 수 있다.The
도 4는 본 발명의 애플리케이션 자동 검증을 위한 방법을 나타낸 도면이다.4 is a diagram illustrating a method for automatic application verification of the present invention.
도 4를 참조하면, 관리자 단말장치(100)는 웹을 통해 검증 장치(200)에 접속하고(S401), 애플리케이션 및 테스트 케이스를 검증 장치(200)에 등록한다(S403).4, the
관리자 단말장치(100)는 워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보를 입력받아 검증 장치(200)에 등록을 요청한다(S405). 즉, 관리자는 그룹 생성 화면에서 워크 그룹, 단말 그룹, 스크립트 그룹의 이름, 설명 등을 포함하는 그룹 생성 정보를 입력하여 검증 장치(200)에 등록을 요청한다.The
검증장치(200)는 관리자 단말장치의 요청에 따라 그룹 생성 정보를 데이터베이스에 등록한다(S407).The
관리자 단말장치(100)는 각 워크 그룹에 할당할 단말그룹 및 스크립트 그룹, 해당 워크그룹의 워크 정보, 기준 단말정보 중 적어도 하나를 포함하는 워크 할당 정보를 입력받아 검증장치(200)로 전송한다(S409). 즉, 관리자는 워크 할당 화면에서 워크(작업)를 분배할 단말장치 및 스크립트를 선택할 수 있다. 그런 후, 관리자는 해당 워크 그룹에서 수행할 작업에 대한 상세 정보 즉, 워크 정보를 입력하고, 단말그룹의 단말장치들 중에서 기준 단말 장치를 선택한다. 그런 후, 관리자는 기준 단말장치의 기준 데이터를 성공으로 설정한다. 그러면, 관리자 단말장치(100)는 각 워크 그룹에 할당할 단말그룹 및 스크립트 그룹, 해당 워크그룹의 워크 정보, 기준 단말정보 등을 포함하는 워크 할당 정보를 검증 장치(200)로 전송한다. The
검증장치는 워크 할당 정보에 따라 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하고, 해당 워크그룹의 워크 정보 또는 기준 단말정보를 저장한다(S411).The verification apparatus sets a terminal group and a script group in each work group according to the work assignment information, and stores work information or reference terminal information of the work group (S411).
검증장치는 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배한다(S413).The verification apparatus distributes the scripts included in the script group to the terminal devices in the terminal group set in each work group (S413).
검증장치로부터 스크립트를 수신한 단말장치는 스크립트를 실행하면서(S415), 실시간으로 변화하는 상태정보를 수집하고(S417), 수집된 상태 정보를 검증 장치로 전송한다(S419).Upon receiving the script from the verification device, the terminal device collects status information that changes in real time (S417) while executing the script (S415), and transmits the collected status information to the verification device (S419).
검증 장치는 단말장치로부터 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단한다(S421).The verification apparatus analyzes the status information received from the terminal and determines whether the work is normally operated (S421).
지금까지 기술한 애플리케이션 자동 검증을 위한 방법은 이를 실행하기 위한 프로그램이 수록된 컴퓨터로 판독 가능한 기록 매체의 형태에 의해 생산, 사용, 양도될 수 있다. 뿐만 아니라, 본 발명은 상기 프로그램을 온라인 상에서 송수신하는 방식에 의해 양도되는 경우, 송수신의 주체가 되는 장치 및 송수신 행위에 대해서도 권리 범위가 미친다고 봄이 당연하다.The method for automatic verification of the application described above can be produced, used and transferred according to the form of a computer-readable recording medium containing a program for executing the method. In addition, when the program is transferred by a method of transmitting and receiving the program on-line, it goes without saying that the scope of the right and the device for transmission and reception and the transmission and reception of the program are also extended.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
Thus, those skilled in the art will appreciate that the present invention may be embodied in other specific forms without departing from the spirit or essential characteristics thereof. It is therefore to be understood that the embodiments described above are to be considered in all respects only as illustrative and not restrictive. The scope of the present invention is defined by the appended claims rather than the detailed description and all changes or modifications derived from the meaning and scope of the claims and their equivalents are to be construed as being included within the scope of the present invention do.
본 발명은 애플리케이션 자동 검증을 위한 검증장치, 단말장치, 시스템, 방법 및 컴퓨터로 판독 가능한 기록 매체를 제공함으로써, 동일한 조건의 테스트를 개별 설정 없이 그룹화로 진행할 수 있고, 이로 인해 검증 효율을 높일 수 있다.
The present invention provides a verification apparatus, a terminal apparatus, a system, a method, and a computer-readable recording medium for automatic verification of an application, so that tests of the same conditions can be grouped without individual setting, .
100 관리자 단말장치 200 검증장치
210 통합 매니저 220 분석 매니저
230 데이터베이스 240 출력부
300 단말장치 310 통신부
320 사용자 인터페이스부 330 저장부
340 단말 제어부100
210
230
300
320
340 terminal control section
Claims (10)
워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보를 상기 데이터베이스에 등록하고, 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하며, 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배하는 통합 매니저; 및
단말장치로부터 스크립트 재생에 따른 상태 정보를 수신하고, 상기 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 분석 매니저;
를 포함하는 검증장치A database storing information on at least one of a work group, a terminal group, and a script group;
The group creation information for at least one of a work group, a terminal group, and a script group is registered in the database, a terminal group and a script group are set for each work group, An integration manager for distributing the scripts contained in the group; And
An analysis manager for receiving status information according to script reproduction from a terminal device and analyzing the received status information to determine whether the work is normally running;
/ RTI >
상기 통신부를 통해 수신된 스크립트 파일이 저장된 저장부;
상기 저장부에 저장된 스크립트 파일을 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 상기 수집된 상태 정보를 검증 장치로 전송하는 단말 제어부;
를 포함하는 단말장치.A communication unit for receiving a script file from the verification apparatus;
A storage unit for storing a script file received through the communication unit;
A terminal control unit for collecting status information that changes in real time while executing a script file stored in the storage unit and transmitting the collected status information to a verification apparatus;
.
상기 관리자 단말장치의 등록 요청에 따라, 상기 그룹 생성 정보를 데이터베이스에 등록하고, 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하며, 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배한 후, 단말장치로부터 스크립트 재생에 따른 상태 정보를 수신하고, 상기 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 검증장치; 및
상기 검증장치로부터 전송된 스크립트 파일을 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 상기 수집된 상태 정보를 상기 검증 장치로 전송하는 적어도 하나 이상의 단말장치;
를 포함하는 애플리케이션 자동 검증을 위한 시스템An administrator terminal device that requests registration of group creation information for at least one of a work group, a terminal group, and a script group;
In accordance with a registration request of the administrator terminal device, registers the group creation information in a database, sets a terminal group and a script group in each work group, and includes terminal groups in the terminal group set in each work group A verification device that receives status information from a terminal device after script reproduction and analyzes the received status information to determine whether the corresponding work is normally running; And
At least one terminal device for collecting status information that changes in real time while executing a script file transmitted from the verification device and transmitting the collected status information to the verification device;
A system for automatic application verification comprising
워크 그룹, 단말 그룹, 스크립트 그룹 중 적어도 하나에 대한 그룹 생성 정보를 등록하는 단계;
각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하고, 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배하는 단계; 및
단말장치로부터 스크립트 재생에 따른 상태 정보가 수신된 경우, 상기 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 단계;
를 포함하는 애플리케이션 자동 검증을 위한 방법A method for an application automatic verification of a verification device,
Registering group creation information for at least one of a work group, a terminal group, and a script group;
Setting a terminal group and a script group in each work group and distributing a script included in the script group to terminal devices in the terminal group set in each work group; And
Analyzing the received status information to determine whether the work is normally operated if state information according to script reproduction is received from the terminal device;
For automated application verification, including
검증장치가 관리자 단말장치의 등록 요청에 따라, 상기 그룹 생성 정보를 데이터베이스에 등록하는 단계;
상기 관리자 단말장치는 각 워크 그룹에 할당할 단말그룹 및 스크립트 그룹, 해당 워크그룹의 워크 정보, 기준 단말정보 중 적어도 하나를 포함하는 워크 할당 정보를 입력받아 상기 검증장치로 전송하는 단계;
상기 검증장치는 상기 워크 할당 정보에 따라 각 워크 그룹에 단말 그룹 및 스크립트 그룹을 설정하고, 해당 워크그룹의 워크 정보 또는 기준 단말정보를 저장하는 단계;
상기 검증장치는 각 워크 그룹에 설정된 단말그룹 내의 단말장치들로 해당 스크립트 그룹에 포함된 스크립트를 분배하는 단계;
상기 검증장치로부터 스크립트를 수신한 단말장치는 상기 스크립트를 실행하면서 실시간으로 변화하는 상태정보를 수집하고, 상기 수집된 상태 정보를 상기 검증 장치로 전송하는 단계; 및
상기 검증 장치는 단말장치로부터 수신된 상태 정보를 분석하여 해당 워크의 정상 구동 여부를 판단하는 단계;
를 포함하는 애플리케이션 자동 검증을 위한 방법.Requesting registration of group creation information for at least one of a work group, a terminal group, and a script group;
Registering the group creation information in a database in response to a registration request of an administrator terminal unit;
The manager terminal device receiving work allocation information including at least one of a terminal group and a script group to be assigned to each work group, work information of the work group, and reference terminal information, and transmitting the work assignment information to the verification device;
Wherein the verification apparatus sets a terminal group and a script group in each work group according to the work allocation information, and stores work information or reference terminal information of the work group;
Distributing a script included in the script group to the terminal devices in the terminal group set in each work group;
The terminal device receiving the script from the verification device collects status information that changes in real time while executing the script, and transmits the collected status information to the verification device. And
Analyzing state information received from the terminal device and determining whether the workpiece is normally driven;
The method comprising the steps of:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20130108885A KR20150030297A (en) | 2013-09-11 | 2013-09-11 | Verification apparatus, terminal device, system, method and computer-readable medium for verifying application |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20130108885A KR20150030297A (en) | 2013-09-11 | 2013-09-11 | Verification apparatus, terminal device, system, method and computer-readable medium for verifying application |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20150030297A true KR20150030297A (en) | 2015-03-20 |
Family
ID=53024357
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20130108885A KR20150030297A (en) | 2013-09-11 | 2013-09-11 | Verification apparatus, terminal device, system, method and computer-readable medium for verifying application |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20150030297A (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107451063A (en) * | 2017-08-14 | 2017-12-08 | 凌云天博光电科技股份有限公司 | A kind of script method of testing and device |
CN109871311A (en) * | 2017-12-04 | 2019-06-11 | 北京京东尚科信息技术有限公司 | A kind of method and apparatus for recommending test case |
KR20190118064A (en) * | 2018-04-09 | 2019-10-17 | (주)유미테크 | Server Validation Automation and Management System |
WO2021107326A1 (en) * | 2019-11-27 | 2021-06-03 | 주식회사 크라우드웍스 | Method and apparatus for providing actual work-based verification crowdsourcing work |
CN117493162A (en) * | 2023-12-19 | 2024-02-02 | 易方达基金管理有限公司 | Data verification method, system, equipment and storage medium for interface test |
-
2013
- 2013-09-11 KR KR20130108885A patent/KR20150030297A/en not_active Application Discontinuation
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107451063A (en) * | 2017-08-14 | 2017-12-08 | 凌云天博光电科技股份有限公司 | A kind of script method of testing and device |
CN109871311A (en) * | 2017-12-04 | 2019-06-11 | 北京京东尚科信息技术有限公司 | A kind of method and apparatus for recommending test case |
KR20190118064A (en) * | 2018-04-09 | 2019-10-17 | (주)유미테크 | Server Validation Automation and Management System |
WO2021107326A1 (en) * | 2019-11-27 | 2021-06-03 | 주식회사 크라우드웍스 | Method and apparatus for providing actual work-based verification crowdsourcing work |
CN117493162A (en) * | 2023-12-19 | 2024-02-02 | 易方达基金管理有限公司 | Data verification method, system, equipment and storage medium for interface test |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9665473B2 (en) | Smart tester application for testing other applications | |
AU2018201941A1 (en) | Automated program code analysis and reporting | |
CN104834602B (en) | A kind of program dissemination method, device and program delivery system | |
CN105787364B (en) | Automatic testing method, device and system for tasks | |
KR20150030297A (en) | Verification apparatus, terminal device, system, method and computer-readable medium for verifying application | |
CN111897724A (en) | Automatic testing method and device suitable for cloud platform | |
CN110933095A (en) | Message parsing method and device | |
CN106612204B (en) | Service checking method and device | |
CN107220169B (en) | Method and equipment for simulating server to return customized data | |
CN112486535B (en) | Remote upgrading method and system for NB-IoT (NB-IoT) equipment | |
CN107621963B (en) | Software deployment method, software deployment system and electronic equipment | |
CN106708727B (en) | Distributed virus characteristic sample verification method and system | |
CN113111000A (en) | Continuous integration automation test system and method, electronic device and storage medium | |
CN112783756A (en) | Automatic test method, terminal, system and storage medium | |
KR20150025106A (en) | Verification apparatus, terminal device, system, method and computer-readable medium for monitoring of application verification result | |
CN108733545B (en) | Pressure testing method and device | |
CN109656791B (en) | gPC performance test method and device based on Jmeter | |
CN110750453A (en) | HTML 5-based intelligent mobile terminal testing method, system, server and storage medium | |
CN110543429A (en) | Test case debugging method and device and storage medium | |
CN114564387A (en) | Scene type automatic testing method and system for OpenStack cloud platform | |
CN108280024B (en) | Flow distribution strategy testing method and device and electronic equipment | |
CN116909936B (en) | Big data automatic test method, equipment and readable storage medium | |
CN113220597A (en) | Test method, test device, electronic apparatus, and storage medium | |
CN117493188A (en) | Interface testing method and device, electronic equipment and storage medium | |
CN116955193A (en) | Interface testing method, device, equipment and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
N231 | Notification of change of applicant | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |