KR102430523B1 - Mobile Device verification automation platform system based on web and verification method of the same - Google Patents

Mobile Device verification automation platform system based on web and verification method of the same Download PDF

Info

Publication number
KR102430523B1
KR102430523B1 KR1020200132014A KR20200132014A KR102430523B1 KR 102430523 B1 KR102430523 B1 KR 102430523B1 KR 1020200132014 A KR1020200132014 A KR 1020200132014A KR 20200132014 A KR20200132014 A KR 20200132014A KR 102430523 B1 KR102430523 B1 KR 102430523B1
Authority
KR
South Korea
Prior art keywords
app
execution
mobile devices
test
server
Prior art date
Application number
KR1020200132014A
Other languages
Korean (ko)
Other versions
KR20220048758A (en
Inventor
한경우
Original Assignee
주식회사 투비웨어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 투비웨어 filed Critical 주식회사 투비웨어
Priority to KR1020200132014A priority Critical patent/KR102430523B1/en
Publication of KR20220048758A publication Critical patent/KR20220048758A/en
Application granted granted Critical
Publication of KR102430523B1 publication Critical patent/KR102430523B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3696Methods or tools to render software testable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3692Test management for test results analysis

Abstract

다양한 모바일 디바이스, 각 디바이스에 탑재되는 다양한 운영체제(OS), 및 각기 다른 OS 버젼들에 대한 검증을 위해, 웹 기반으로 하나 이상의 모바일 디바이스들에 대한 검증을 자동화하는 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법이 개시된다. 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템은: 다양한 운영체제들(OS) 및 다양한 OS 버젼들로 이루어지는 다수의 모바일 디바이스들을 포함하는 디바이스 팜; 및 웹 기반으로 앱 공급자 단말기로부터 앱의 실행에 관련된 테스트를 요청받고, 앱 실행 명령을 상기 다수의 모바일 디바이스들에 전달하여 상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키고, 상기 앱 실행 명령에 따른 각 모바일 디바이스의 앱 실행에 관련된 테스트 수행 결과에 대한 자동 리포트를 생성하여 상기 앱 공급자 단말기에 제공하도록 구성되는 서버를 포함한다.A web-based mobile device verification automation platform system that automates verification of one or more mobile devices on a web-based basis for verification of various mobile devices, various operating systems (OS) mounted on each device, and different OS versions; and A verification method using the same is disclosed. A web-based mobile device verification automation platform system according to an embodiment of the present invention includes: a device farm including a plurality of mobile devices consisting of various operating systems (OS) and various OS versions; and a web-based request for a test related to the execution of the app from the app provider terminal, and transmits an app execution command to the plurality of mobile devices to execute the app on the plurality of mobile devices, and according to the app execution command and a server configured to generate an automatic report on test performance results related to app execution of each mobile device and provide it to the app provider terminal.

Description

웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 그 검증 방법{Mobile Device verification automation platform system based on web and verification method of the same}Web-based mobile device verification automation platform system and verification method thereof

본 발명은 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 그 검증 방법에 관한 것으로, 보다 상세하게는 다양한 모바일 디바이스, 각 디바이스에 탑재되는 다양한 운영체제(OS), 및 각기 다른 OS 버젼들에 대한 검증을 위해, 웹 기반으로 하나 이상의 모바일 디바이스들에 대한 검증을 자동화하는 플랫폼과 이를 이용한 검증 방법에 관한 것이다.The present invention relates to a web-based mobile device verification automation platform system and a verification method thereof, and more particularly, for verification of various mobile devices, various operating systems (OS) mounted on each device, and different OS versions, A web-based platform for automating verification of one or more mobile devices and a verification method using the same.

모바일 서비스의 확산으로 인하여 다양한 모바일 디바이스, 다양한 OS 버젼, 다수의 앱이 등장함에 따라, 서비스 기능의 확대에 따른 앱 품질 검증 프로세스의 복잡도가 지속적으로 증가하고 있다.As various mobile devices, various OS versions, and multiple apps appear due to the spread of mobile services, the complexity of the app quality verification process continues to increase according to the expansion of service functions.

앱 서비스 품질을 확보하기 위한 노력으로, 다수의 인력을 동원하여 수동으로 화면을 테스트하는 수동 테스트가 일반적으로 수행되고 있으며, 인력 비용과 테스트 수행 시간을 단축하기 위하여 모바일 테스트 솔루션들이 개발되었다.In an effort to secure app service quality, manual tests that manually test the screen by mobilizing a large number of people are generally performed, and mobile test solutions have been developed to reduce labor costs and test execution time.

기존에 개발된 모바일 테스트 솔루션은 개발자나 테스터의 PC에 프로그램을 설치하여 모바일 디바이스들을 연결하고, 녹화된 화면을 재생하게 하여 오류 여부를 검증하는 방식이다.The previously developed mobile test solution is a method of verifying errors by installing a program on the developer's or tester's PC, connecting mobile devices, and playing the recorded screen.

종래의 모바일 테스트 솔루션의 경우, 모바일 디바이스의 화면 및 명령을 제어하기 위하여 관리자 권한을 얻기 위해 iOS의 탈옥(jailbreak)이나 루팅(rooting)을 한 상태로 테스트를 수행하여야 하는데, 모바일 디바이스 제조사와 앱 개발/배포 업체들은 보안상의 이유로 이러한 상태의 테스트를 거부하게 되는 문제가 있다.In the case of a conventional mobile test solution, it is necessary to perform a test with a jailbreak or rooting of iOS in order to obtain administrator rights to control the screen and commands of the mobile device. /Distributors have a problem that refuses to test in this state for security reasons.

또한, 본인의 단말기를 이용하거나, PC에 유/무선을 통하여 단말기를 연결해서 사용하는 기존의 테스트 방식은 빠른 출시 속도의 신규 단말기들을 짧은 개발 기간 내에 효과적으로 테스트 수행하기에는 테스트의 관리적, 물리적인 한계가 있고, 다수의 단말기들을 관리하기에도 어려움이 있다.In addition, the existing test method using one's own terminal or connecting a terminal to a PC via wired/wireless has administrative and physical limitations to effectively test new terminals with a fast launch speed within a short development period. Also, it is difficult to manage a plurality of terminals.

본 발명은 다양한 모바일 디바이스, 각 디바이스에 탑재되는 다양한 운영체제(OS), 및 각기 다른 OS 버젼들에 대한 검증을 위해, 웹 기반으로 하나 이상의 모바일 디바이스들에 대한 검증을 자동화하는 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법을 제공하기 위한 것이다.The present invention provides a web-based mobile device verification automation that automates verification of one or more mobile devices on a web-based basis for verification of various mobile devices, various operating systems (OSs) mounted on each device, and different OS versions It is to provide a platform system and a verification method using the same.

또한, 본 발명은 테스트 케이스들을 통합 관리 및 재사용할 수 있도록 하고, 하나의 디바이스에서 다수의 디바이스를 자동으로 제어하며, 테스트 수행 결과에 대한 자동 리포트를 제공하여 누구나 사용할 수 있는 웹 환경의 테스트 서비스 인프라를 구축한 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법을 제공하기 위한 것이다.In addition, the present invention enables the integrated management and reuse of test cases, automatically controls a number of devices from one device, and provides an automatic report on the test results to provide a web environment test service infrastructure that anyone can use. It is to provide a web-based mobile device verification automation platform system and a verification method using the same.

또한, 본 발명은 iOS의 탈옥(jailbreak)이나 루팅(rooting)을 사용하지 않고도 자동화 테스트가 가능하고, 모바일 디바이스 팜(Farm)을 통해 테스트에 필요한 모바일 디바이스들을 선택 예약하여 사용 가능한 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법을 제공하기 위한 것이다.In addition, the present invention enables automated testing without using iOS jailbreak or rooting, and verifies available web-based mobile devices by selecting and reserving mobile devices required for testing through the mobile device farm. It is to provide an automation platform system and a verification method using the same.

또한, 본 발명은 스크립트 기반의 개발자 언어가 필요 없이 모델 기반으로 테스트 케이스 구성이 가능하고, 앱 서비스 출시 환경과 동일한 조건으로 테스트 수행이 가능하며, 보안상의 문제도 해결할 수 있는 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법을 제공하기 위한 것이다.In addition, the present invention enables a model-based test case configuration without the need for a script-based developer language, tests can be performed under the same conditions as the app service release environment, and web-based mobile device verification automation that can also solve security problems It is to provide a platform system and a verification method using the same.

또한, 본 발명은 웹 기반으로 통합된 검증 자동화 환경을 제공함으로써, 한정된 인력으로 효과적인 테스트 및 산출물 관리가 가능하고, 표준화된 테스트 관리 환경을 통해 정확한 결과 분석이 가능하며, 단기간에 신속한 테스트가 가능한 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법을 제공하기 위한 것이다.In addition, the present invention provides a web-based integrated verification automation environment, enabling effective test and product management with limited manpower, accurate result analysis through a standardized test management environment, and a web capable of rapid testing in a short period of time An object of the present invention is to provide a mobile device verification automation platform system and a verification method using the same.

본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템은: 다양한 운영체제들(OS) 및 다양한 OS 버젼들로 이루어지는 다수의 모바일 디바이스들을 포함하는 디바이스 팜; 및 웹 기반으로 앱 공급자 단말기로부터 앱의 실행에 관련된 테스트를 요청받고, 앱 실행 명령을 상기 다수의 모바일 디바이스들에 전달하여 상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키고, 상기 앱 실행 명령에 따른 각 모바일 디바이스의 앱 실행에 관련된 테스트 수행 결과에 대한 자동 리포트를 생성하여 상기 앱 공급자 단말기에 제공하도록 구성되는 서버를 포함한다.A web-based mobile device verification automation platform system according to an embodiment of the present invention includes: a device farm including a plurality of mobile devices consisting of various operating systems (OS) and various OS versions; and a web-based request for a test related to the execution of the app from the app provider terminal, and transmits an app execution command to the plurality of mobile devices to execute the app on the plurality of mobile devices, and according to the app execution command and a server configured to generate an automatic report on test performance results related to app execution of each mobile device and provide it to the app provider terminal.

본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템은: 상기 다양한 운영체제들 및 상기 다양한 OS 버젼들에 대응하는 다수의 모바일 에이전트들을 더 포함할 수 있다. 상기 서버는 상기 앱 실행 명령을 상기 다수의 모바일 에이전트들로 전달하도록 구성될 수 있다. 상기 다수의 모바일 에이전트들은 상기 앱 실행 명령을 수신하여 대응하는 모바일 디바이스들로 전달하여 상기 앱을 실행시키도록 구성될 수 있다.The web-based mobile device verification automation platform system according to an embodiment of the present invention may further include: the various operating systems and a plurality of mobile agents corresponding to the various OS versions. The server may be configured to forward the app execution command to the plurality of mobile agents. The plurality of mobile agents may be configured to receive and transmit the app execution command to corresponding mobile devices to execute the app.

상기 서버는 상기 모바일 디바이스들에서 상기 앱을 자동으로 실행시켜 테스트하도록 구성되는 테스트 자동화 모듈을 포함할 수 있다. 상기 테스트 자동화 모듈은: 상기 앱의 순차적인 실행들을 위한 케이스 시나리오가 설정되는 케이스/시나리오 관리부; 상기 앱의 순차적인 실행들에 관련된 케이스 시나리오에 따라 자동화 스크립트가 설정되는 자동화 스크립트부; 및 상기 케이스 시나리오 및 상기 자동화 스크립트를 기반으로 다수의 앱 실행 명령들을 순차적으로 생성하여 상기 모바일 디바이스들로 전송하고, 상기 모바일 디바이스들에서의 상기 앱의 실행을 자동 테스트하도록 구성되는 자동화 테스트 수행부를 포함할 수 있다.The server may include a test automation module configured to automatically run and test the app on the mobile devices. The test automation module may include: a case/scenario manager in which case scenarios for sequential execution of the app are set; an automation script unit in which an automation script is set according to a case scenario related to sequential executions of the app; and an automated test performing unit configured to sequentially generate and transmit a plurality of app execution commands to the mobile devices based on the case scenario and the automation script, and automatically test the execution of the app in the mobile devices can do.

상기 서버는 상기 앱 공급자 단말기로 하여금 상기 모바일 디바이스들 중 상기 앱의 실행을 테스트할 하나 이상의 모바일 디바이스를 선택할 수 있도록 하는 인터페이스를 제공하도록 구성될 수 있다. 상기 서버는 상기 인터페이스를 통해 선택된 상기 하나 이상의 모바일 디바이스를 미러링(mirroring)하여 병렬적으로 테스트하도록 구성될 수 있다.The server may be configured to provide an interface for allowing the app provider terminal to select one or more mobile devices to test execution of the app among the mobile devices. The server may be configured to test in parallel by mirroring the one or more mobile devices selected through the interface.

본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼을 이용한 검증 방법은: 서버가 웹 기반으로 앱 공급자 단말기로부터 앱의 실행에 관련된 테스트를 요청받는 단계; 상기 서버가 앱 실행 명령을 디바이스 팜의 다수의 모바일 디바이스들에 전달하여 상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계; 및 상기 서버가 상기 앱 실행 명령에 따른 각 모바일 디바이스의 앱 실행에 관련된 테스트 수행 결과에 대한 자동 리포트를 생성하여 상기 앱 공급자 단말기에 제공하는 단계를 포함한다. 상기 디바이스 팜은 다양한 운영체제들(OS) 및 다양한 OS 버젼들로 이루어지는 모바일 디바이스들을 포함한다.A verification method using a web-based mobile device verification automation platform according to an embodiment of the present invention includes: receiving, by a server, a web-based request for a test related to the execution of an app from an app provider terminal; executing, by the server, an app execution command to a plurality of mobile devices in a device farm to execute the app in the plurality of mobile devices; and generating, by the server, an automatic report on test execution results related to app execution of each mobile device according to the app execution command, and providing the report to the app provider terminal. The device farm includes mobile devices comprising various operating systems (OSs) and various OS versions.

상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계는: 상기 서버가 상기 앱 실행 명령을 상기 다양한 운영체제들 및 상기 다양한 OS 버젼들에 대응하는 다수의 모바일 에이전트들로 전달하는 단계; 및 상기 다수의 모바일 에이전트가 상기 서버로부터 상기 앱 실행 명령을 수신하고 대응하는 모바일 디바이스들로 전달하여 상기 앱을 실행시키는 단계를 포함할 수 있다.The executing of the app in the plurality of mobile devices may include: transmitting, by the server, the app execution command to the various operating systems and a plurality of mobile agents corresponding to the various OS versions; and receiving, by the plurality of mobile agents, the app execution command from the server and transmitting the command to corresponding mobile devices to execute the app.

상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계는: 상기 서버가 상기 앱의 순차적인 실행들을 위한 케이스 시나리오와, 상기 케이스 시나리오에 따라 설정되는 자동화 스크립트를 기반으로, 다수의 앱 실행 명령들을 순차적으로 생성하여 상기 모바일 디바이스들로 전송함으로써, 상기 모바일 디바이스들에서의 상기 앱의 실행들을 자동 테스트하는 단계를 포함할 수 있다.The step of executing the app in the plurality of mobile devices includes: the server sequentially executes a plurality of app execution commands based on a case scenario for sequential execution of the app and an automation script set according to the case scenario It may include automatically testing executions of the app on the mobile devices by generating the .

상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계는: 상기 서버에 의해, 상기 앱 공급자 단말기로 하여금 상기 다수의 모바일 디바이스들 중 상기 앱의 실행을 테스트할 하나 이상의 모바일 디바이스를 선택할 수 있도록 하는 인터페이스를 제공하는 단계; 및 상기 서버에 의해, 상기 인터페이스를 통해 선택된 상기 하나 이상의 모바일 디바이스를 미러링(mirroring)하여 상기 하나 이상의 모바일 디바이스를 병렬적으로 테스트하는 단계를 포함할 수 있다.The executing of the app on the plurality of mobile devices may include: an interface allowing, by the server, the app provider terminal to select one or more mobile devices to test execution of the app among the plurality of mobile devices providing; and testing, by the server, the one or more mobile devices in parallel by mirroring the one or more mobile devices selected through the interface.

본 발명의 실시예에 따르면, 상기 웹 기반 모바일 디바이스 검증 자동화 플랫폼을 이용한 검증 방법을 실행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체가 제공된다.According to an embodiment of the present invention, there is provided a computer-readable recording medium in which a program for executing a verification method using the web-based mobile device verification automation platform is recorded.

본 발명의 실시예에 의하면, 다양한 모바일 디바이스, 각 디바이스에 탑재되는 다양한 운영체제(OS), 및 각기 다른 OS 버젼들에 대한 검증을 위해, 웹 기반으로 하나 이상의 모바일 디바이스들에 대한 검증을 자동화하는 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법이 제공된다.According to an embodiment of the present invention, for verification of various mobile devices, various operating systems (OSs) mounted on each device, and different OS versions, a web-based web automating verification of one or more mobile devices A mobile device verification automation platform system based on the same and a verification method using the same are provided.

또한, 본 발명의 실시예에 의하면, 테스트 케이스들을 통합 관리 및 재사용할 수 있도록 하고, 하나의 디바이스에서 다수의 디바이스를 자동으로 제어하며, 테스트 수행 결과에 대한 자동 리포트를 제공하여 누구나 사용할 수 있는 웹 환경의 테스트 서비스 인프라를 구축할 수 있다.In addition, according to an embodiment of the present invention, test cases can be integrated management and reused, multiple devices are automatically controlled from one device, and an automatic report on test execution results is provided so that anyone can use the web. You can build an environment's test service infrastructure.

또한, 본 발명의 실시예에 의하면, iOS의 탈옥(jailbreak)이나 루팅(rooting)을 사용하지 않고도 자동화 테스트가 가능하고, 모바일 디바이스 팜(Farm)을 통해 테스트에 필요한 모바일 디바이스들을 선택 예약하여 모바일 디바이스 자동 검증이 가능하다.In addition, according to an embodiment of the present invention, automated testing is possible without using iOS jailbreak or rooting, and by selecting and reserving mobile devices required for testing through the mobile device farm, the mobile device Automatic verification is possible.

또한, 본 발명의 실시예에 의하면, 스크립트 기반의 개발자 언어가 필요 없이 모델 기반으로 테스트 케이스 구성이 가능하고, 앱 서비스 출시 환경과 동일한 조건으로 테스트 수행이 가능하며, 모바일 디바이스 자동 검증 과정에서의 보안상의 문제도 해결할 수 있다.In addition, according to an embodiment of the present invention, it is possible to configure a model-based test case without the need for a script-based developer language, to perform a test under the same conditions as the app service release environment, and to secure security in the mobile device automatic verification process The top issue can also be solved.

또한, 본 발명의 실시예에 의하면, 웹 기반으로 통합된 검증 자동화 환경을 제공함으로써, 한정된 인력으로 효과적인 테스트 및 산출물 관리가 가능하고, 표준화된 테스트 관리 환경을 통해 정확한 결과 분석이 가능하며, 단기간에 신속한 테스트가 가능하다.In addition, according to an embodiment of the present invention, by providing a web-based integrated verification automation environment, effective test and product management with limited manpower is possible, accurate result analysis is possible through a standardized test management environment, and in a short time Fast testing is possible.

도 1은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템의 구성도이다.
도 2는 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템의 개념도이다.
도 3은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템을 구성하는 서버의 구성도이다.
도 4는 본 발명의 실시예에 따른 자동화 스크립트부의 동작을 설명하기 위한 예시도이다.
도 5 및 도 6은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템의 동작을 설명하기 위한 개념도이다.
도 7 내지 도 9는 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템에 의해 출력되는 자동 리포트 화면의 예시도이다.
도 10은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼을 이용한 검증 방법의 순서도이다.
1 is a block diagram of a web-based mobile device verification automation platform system according to an embodiment of the present invention.
2 is a conceptual diagram of a web-based mobile device verification automation platform system according to an embodiment of the present invention.
3 is a configuration diagram of a server constituting a web-based mobile device verification automation platform system according to an embodiment of the present invention.
4 is an exemplary diagram for explaining the operation of the automation script unit according to an embodiment of the present invention.
5 and 6 are conceptual diagrams for explaining the operation of a web-based mobile device verification automation platform system according to an embodiment of the present invention.
7 to 9 are exemplary views of an automatic report screen output by the web-based mobile device verification automation platform system according to an embodiment of the present invention.
10 is a flowchart of a verification method using a web-based mobile device verification automation platform according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Advantages and features of the present invention and methods of achieving them will become apparent with reference to the embodiments described below in detail in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms, and only these embodiments allow the disclosure of the present invention to be complete, and common knowledge in the technical field to which the present invention pertains It is provided to fully inform those who have the scope of the invention, and the present invention is only defined by the scope of the claims. Like reference numerals refer to like elements throughout.

본 명세서에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 본 명세서에서 사용되는 '~부, ~모듈'은 적어도 하나의 기능이나 동작을 처리하는 단위로서, 예를 들어 소프트웨어, FPGA 또는 하드웨어 구성요소를 의미할 수 있다. '~부, ~모듈'에서 제공하는 기능은 복수의 구성요소에 의해 분리되어 수행되거나, 다른 추가적인 구성요소와 통합될 수도 있다. 본 명세서의 '~부, ~모듈'은 반드시 소프트웨어 또는 하드웨어에 한정되지 않으며, 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고, 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 이하에서는 도면을 참조하여 본 발명의 실시예에 대해서 구체적으로 설명하기로 한다.In the present specification, when a part "includes" a certain component, this means that other components may be further included rather than excluding other components unless otherwise stated. As used herein, '~ unit, ~ module' is a unit that processes at least one function or operation, and may mean, for example, software, FPGA, or hardware component. Functions provided by '~ unit, ~ module' may be performed separately by a plurality of components, or may be integrated with other additional components. The '~ unit, ~ module' in the present specification is not necessarily limited to software or hardware, and may be configured to be in an addressable storage medium, or may be configured to reproduce one or more processors. Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings.

본 발명의 실시예는 다양한 모바일 디바이스, 각 디바이스에 탑재되는 다양한 운영체제(OS; Operating System), 그리고 각기 다른 OS 버젼(OS Version)들에 대한 검증을 위해, 웹 기반으로 하나 이상의 모바일 디바이스들에 대한 검증을 자동화하기 위한 플랫폼과 이를 이용한 검증 방법을 제공한다.An embodiment of the present invention provides a web-based method for one or more mobile devices for verification of various mobile devices, various operating systems (OS) mounted on each device, and different OS versions. A platform for automating verification and a verification method using it are provided.

도 1은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템의 구성도이다. 도 2는 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템의 개념도이다.1 is a block diagram of a web-based mobile device verification automation platform system according to an embodiment of the present invention. 2 is a conceptual diagram of a web-based mobile device verification automation platform system according to an embodiment of the present invention.

도 1 및 도 2를 참조하면, 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템(10)은 디바이스 팜(100), 서버(200) 및 다수의 모바일 에이전트(300)를 포함한다.1 and 2 , the web-based mobile device verification automation platform system 10 according to an embodiment of the present invention includes a device farm 100 , a server 200 , and a plurality of mobile agents 300 .

디바이스 팜(100)은 다양한 운영체제들(OS; operating system) 및 다양한 OS 버젼들(OS versions)로 이루어지는 다수의 상이한 모바일 디바이스들을 포함한다.The device farm 100 includes a number of different mobile devices configured with various operating systems (OS) and various OS versions.

서버(200)는 앱 공급자 단말기(20)의 요청에 따라 디바이스 팜(100)의 다수의 상이한 모바일 디바이스들에 앱을 실행하여 앱 실행 테스트 결과를 앱 공급자 단말기(20)에 전달하는 서비스를 제공할 수 있다.The server 200 executes the app on a plurality of different mobile devices of the device farm 100 according to the request of the app provider terminal 20 to provide a service for delivering the app execution test result to the app provider terminal 20. can

서버(200)는 웹 기반으로 앱 공급자 단말기(20)로부터 앱의 실행에 관련된 테스트를 요청받을 수 있다.The server 200 may receive a web-based request for a test related to the execution of the app from the app provider terminal 20 .

서버(200)는 앱 공급자 단말기(20)의 앱 실행 테스트 요청에 따라 앱 실행 명령을 디바이스 팜(100)의 다수의 상이한 모바일 디바이스들에 전달하여 모바일 디바이스들에서 앱을 실행시킬 수 있다.The server 200 may transmit an app execution command to a plurality of different mobile devices of the device farm 100 according to the app execution test request of the app provider terminal 20 to execute the app in the mobile devices.

또한, 서버(200)는 앱 실행 명령에 따른 각 모바일 디바이스의 앱 실행에 관련된 테스트 수행 결과에 대한 자동 리포트를 생성하여 앱 공급자 단말기(20)에 제공할 수 있다.In addition, the server 200 may generate an automatic report on the test execution results related to the execution of the app of each mobile device according to the app execution command and provide it to the app provider terminal 20 .

다수의 모바일 에이전트들(300)은 다양한 운영체제들 및 다양한 OS 버젼들에 대응하도록 마련될 수 있다.A plurality of mobile agents 300 may be provided to correspond to various operating systems and various OS versions.

서버(200)는 앱 실행 명령을 다수의 모바일 에이전트들(300)로 전달하도록 구성될 수 있다. 다수의 모바일 에이전트들(300)은 서버(200)로부터 앱 실행 명령을 수신하여 대응하는 모바일 디바이스들로 전달하여 앱을 실행시킬 수 있다.The server 200 may be configured to transmit an app execution command to a plurality of mobile agents 300 . The plurality of mobile agents 300 may receive an app execution command from the server 200 and transmit it to corresponding mobile devices to execute the app.

앱 공급자 단말기(20)는 클라우드 서비스(cloud service)를 통해 서버(200)로부터 디바이스 팜(100)의 다수의 모바일 디바이스들에서 실행되는 앱의 테스트 결과에 관한 자동 리포트를 제공받을 수 있다.The app provider terminal 20 may receive an automatic report on the test result of the app executed in a plurality of mobile devices of the device farm 100 from the server 200 through a cloud service.

도 3은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템을 구성하는 서버의 구성도이다.3 is a configuration diagram of a server constituting a web-based mobile device verification automation platform system according to an embodiment of the present invention.

도 3을 참조하면, 서버(200)는 테스트 자동화 모듈(210)을 포함할 수 있다. 테스트 자동화 모듈(210)은 디바이스 팜(100)의 모바일 디바이스들에서 앱을 자동으로 실행시켜 테스트하도록 구성될 수 있다.Referring to FIG. 3 , the server 200 may include a test automation module 210 . The test automation module 210 may be configured to automatically run and test an app in mobile devices of the device farm 100 .

테스트 자동화 모듈(210)은 케이스/시나리오 관리부, 자동화 스크립트부 및 자동화 테스트 수행부를 포함할 수 있다.The test automation module 210 may include a case/scenario management unit, an automated script unit, and an automated test execution unit.

테스트 자동화 모듈(210)의 케이스/시나리오 관리부는 앱의 순차적인 실행들을 위한 케이스 시나리오가 설정될 수 있다.The case/scenario manager of the test automation module 210 may set a case scenario for sequential execution of apps.

테스트 자동화 모듈(210)의 자동화 스크립트부는 앱의 순차적인 실행들에 관련된 케이스 시나리오에 따라 자동화 스크립트가 설정될 수 있다.The automation script unit of the test automation module 210 may set an automation script according to a case scenario related to sequential execution of an app.

도 4는 본 발명의 실시예에 따른 자동화 스크립트부의 동작을 설명하기 위한 예시도이다.4 is an exemplary diagram for explaining the operation of the automation script unit according to an embodiment of the present invention.

도 3 및 도 4를 참조하면, 테스트 자동화 모듈(210)의 자동화 스크립트부는 서버 관리자가 자동화 스크립트를 작성하여 설정하기 위한 인터페이스를 제공할 수 있다.3 and 4 , the automation script unit of the test automation module 210 may provide an interface for the server administrator to create and set an automation script.

자동화 스크립트는 예를 들어, 앱의 실행 화면, 앱에 대해 실행할 이벤트들의 목록에 해당하는 이벤트리스트, 자동화 스크립트의 실행 시작과 종료, 기록, 앱 실행 결과 리포트 확인 등에 관한 명령을 입력할 수 있도록 제공될 수 있다.The automation script may be provided to input commands for, for example, the execution screen of the app, an event list corresponding to the list of events to be executed for the app, start and end execution of the automation script, record, and check the application execution result report. can

자동화 스크립트의 이벤트리스트는 앱에 대한 각 실행 항목을 선택하여 테스트되도록 하거나, 각 실행 항목을 선택 해제하여 테스트하지 않도록 하거나, 각 실행 항목을 삭제할 수 있도록 제공될 수 있다.The event list of the automation script may be provided so that each execution item for the app is selected to be tested, each execution item is deselected to not test, or each execution item can be deleted.

이러한 자동화 스크립트는 앱 공급자에 의해 요청된 앱의 테스트 케이스 별로 생성되어 저장될 수 있으며, 테스트 케이스 별로 앱 실행과 관련된 수행 로그가 기록될 수 있다.Such an automation script may be generated and stored for each test case of the app requested by the app provider, and an execution log related to the execution of the app may be recorded for each test case.

테스트 자동화 모듈(210)의 자동화 테스트 수행부는 케이스 시나리오 및 자동화 스크립트를 기반으로 다수의 앱 실행 명령들을 순차적으로 생성할 수 있다.The automated test execution unit of the test automation module 210 may sequentially generate a plurality of app execution commands based on a case scenario and an automation script.

또한 테스트 자동화 모듈(210)은 추가로 단말기 예약부, 매뉴얼 테스트부, 결함 관리부, 리포트부, 통계 처리부를 포함할 수 있다.Also, the test automation module 210 may further include a terminal reservation unit, a manual test unit, a defect management unit, a report unit, and a statistics processing unit.

테스트 관리 모듈(220)은 프로젝트 관리부, 단말기 관리부, 단말기 예약 관리부, 사용자 관리부, 공지사항/게시판 관리부, 권한 관리부, 메뉴 관리부, 라이선스 관리부를 포함할 수 있다.The test management module 220 may include a project management unit, a terminal management unit, a terminal reservation management unit, a user management unit, a notice/board management unit, a rights management unit, a menu management unit, and a license management unit.

이와 같은 테스트 자동화 모듈(210)과 테스트 관리 모듈(220)에 의해, 다수의 앱 공급자 단말기(20)에 의해 요청된 앱 실행 테스트 태스크들의 순서를 관리하고, 디바이스 팜(100)의 모바일 디바이스들의 앱 실행 순서를 관리할 수 있다.By the test automation module 210 and the test management module 220, the order of the app execution test tasks requested by the plurality of app provider terminals 20 is managed, and the app of the mobile devices of the device farm 100 You can manage the execution order.

또한, 다양한 앱들의 실행들에 관하여 각 모바일 디바이스의 앱 정상 실행 또는 비정상 실행을 통계 처리하여, 각 모바일 디바이스를 통계적으로 분석하는 것도 가능하다.In addition, it is also possible to statistically analyze each mobile device by statistically processing the normal or abnormal execution of the app of each mobile device with respect to the execution of various apps.

이때, 앱의 다양한 유형 별로 모바일 디바이스의 앱 실행을 분석할 수 있으며, 예를 들어, 게임에 해당하는 앱들의 실행에 적합하거나 부적합한 모바일 디바이스를 분석할 수 있다.In this case, the execution of the mobile device may be analyzed for each type of application, and for example, a mobile device suitable or unsuitable for execution of apps corresponding to a game may be analyzed.

테스트 서버(230)는 테스트 자동화 모듈(210) 및 테스트 관리 모듈(220)에 의해 생성되는 실행 명령들을 디바이스 팜(100)의 모바일 디바이스들로 전송하여 모바일 디바이스들에서 앱의 실행을 자동 테스트할 수 있다.The test server 230 transmits execution commands generated by the test automation module 210 and the test management module 220 to the mobile devices of the device farm 100 to automatically test the execution of the app on the mobile devices. have.

테스트 서버(230)는 미러 서버(mirror server)와 커맨드 서버(command server)를 포함할 수 있다.The test server 230 may include a mirror server and a command server.

서버(200)는 앱 공급자 단말기(20)로 하여금 디바이스 팜(100)의 모바일 디바이스들 중 앱의 실행을 테스트할 하나 이상의 모바일 디바이스를 선택할 수 있도록 하는 인터페이스를 제공할 수 있다.The server 200 may provide an interface that allows the app provider terminal 20 to select one or more mobile devices to test the execution of the app from among the mobile devices of the device farm 100 .

서버(200)는 이 인터페이스를 통해 앱 공급자 단말기(20)에 의해 선택된 하나 이상의 모바일 디바이스를 미러링(mirroring)하여 하나 이상의 모바일 디바이스를 병렬적으로 테스트할 수 있다.The server 200 may test one or more mobile devices in parallel by mirroring one or more mobile devices selected by the app provider terminal 20 through this interface.

또한, 서버(200)는 PC 에이전트의 미러 에이전트와, 커맨드 에이전트, 모바일 에이전트의 미러, 키 처리부, 이벤트 처리 프로세스, 화면수집/이벤트 처리부를 통해 모바일 디바이스와 미러링 동작을 구현하여 앱 실행 명령을 통해 디바이스 팜(100)의 모바일 디바이스들에서 각각 앱이 실행되도록 할 수 있다.In addition, the server 200 implements the mirroring operation with the mobile device through the mirror agent of the PC agent, the command agent, the mirror of the mobile agent, the key processing unit, the event processing process, and the screen collection/event processing unit through the app execution command. Each of the mobile devices of the palm 100 may run an app.

도 5 및 도 6은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템의 동작을 설명하기 위한 개념도이다.5 and 6 are conceptual diagrams for explaining the operation of the web-based mobile device verification automation platform system according to an embodiment of the present invention.

도 5 및 도 6을 참조하면, 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템(10)은 앱 실행 명령 입력부(400)와, 자동 리포트 출력부(500)를 포함할 수 있다.5 and 6 , the web-based mobile device verification automation platform system 10 according to an embodiment of the present invention may include an app execution command input unit 400 and an automatic report output unit 500 .

앱 실행 명령 입력부(400)는 디바이스 팜(100)의 다수의 모바일 디바이스들에서 실행할 앱의 실행 명령을 입력할 수 있도록 제공될 수 있다.The app execution command input unit 400 may be provided to input an execution command of an app to be executed in a plurality of mobile devices of the device farm 100 .

앱 실행 명령 입력부(400)는 서버 관리자 단말기에 구비되어 서버 관리자로부터 앱 실행 명령을 입력받거나, 혹은 앱 공급자 단말기에 구비되어 앱 공급자로부터 앱 실행 명령을 입력받도록 구성될 수도 있다.The app execution command input unit 400 may be provided in the server manager terminal to receive an app execution command from the server manager, or may be provided in the app provider terminal to receive an app execution command from the app provider.

앱 실행 명령 입력부(400)는 예를 들어, 키보드, 마우스, 터치 패드 등의 입력 인터페이스로 구성될 수 있으나, 이에 한정되지는 않는다.The app execution command input unit 400 may be configured as an input interface such as, for example, a keyboard, a mouse, and a touch pad, but is not limited thereto.

앱 실행 명령 입력부(400)에 의해 앱 실행 명령들이 입력되면, 해당 앱 실행 명령들이 순차적으로 디바이스 팜(100)으로 전달되고, 디바이스 팜(100)의 모든 모바일 디바이스들에서 각각 해당 앱 실행 명령들이 순차적으로 실행될 수 있다.When the app execution commands are input by the app execution command input unit 400 , the corresponding app execution commands are sequentially transmitted to the device farm 100 , and the corresponding app execution commands are sequentially executed in all mobile devices of the device farm 100 . can be executed as

도 7 내지 도 9는 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템에 의해 출력되는 자동 리포트 화면의 예시도이다.7 to 9 are exemplary views of an automatic report screen output by the web-based mobile device verification automation platform system according to an embodiment of the present invention.

도 2, 도 6 내지 도 9를 참조하면, 자동 리포트 출력부(500)는 디바이스 팜(100)의 각 모바일 디바이스에서 실행되는 앱의 테스트 결과에 대한 자동 리포트를 모니터 화면에 출력할 수 있다.2 and 6 to 9 , the automatic report output unit 500 may output an automatic report on a test result of an app executed in each mobile device of the device farm 100 on the monitor screen.

디바이스 팜(100)의 각 모바일 디바이스에서 실행되는 앱의 실행 정보는 모바일 에이전트(300)를 통해 서버(200)로 제공될 수 있다.Execution information of an app executed in each mobile device of the device farm 100 may be provided to the server 200 through the mobile agent 300 .

자동 리포트 출력부(500)는 서버 관리자 단말기에 구비되거나, 혹은 앱 공급자 단말기(20)에 구비될 수 있다.The automatic report output unit 500 may be provided in the server manager terminal, or may be provided in the app provider terminal 20 .

자동 리포트 출력부(500)는 디바이스 팜(100)의 각 모바일 디바이스 별로 앱 실행 화면, 앱의 실행에 관한 결함 발생 정보, 결함이 발생된 모바일 디바이스 정보 등을 제공할 수 있다.The automatic report output unit 500 may provide an app execution screen for each mobile device of the device farm 100 , defect occurrence information related to the execution of the app, and mobile device information in which the defect occurs.

도 10은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼을 이용한 검증 방법의 순서도이다. 도 1, 도 2 및 도 10을 참조하면, 먼저 서버(200)가 웹 기반으로 앱 공급자 단말기(20)로부터 앱의 실행에 관련된 테스트를 요청받는 단계가 수행된다(S110).10 is a flowchart of a verification method using a web-based mobile device verification automation platform according to an embodiment of the present invention. Referring to FIGS. 1, 2 and 10 , first, the server 200 receives a web-based request for a test related to the execution of the app from the app provider terminal 20 ( S110 ).

앱 공급자 단말기(20)로부터 앱의 실행에 관련된 테스트가 요청되면, 서버(200)는 앱 실행 명령을 디바이스 팜(100)의 다수의 모바일 디바이스들에 전달하여 다수의 모바일 디바이스들에서 해당 앱을 실행시키는 단계를 수행한다(S120).When a test related to the execution of the app is requested from the app provider terminal 20, the server 200 transmits the app execution command to a plurality of mobile devices of the device farm 100 to execute the corresponding app in the plurality of mobile devices to perform the step (S120).

앞서 설명된 바와 같이, 디바이스 팜(100)은 다양한 운영체제들(OS; operating system) 및 다양한 OS 버젼들(OS versions)로 이루어지는 다수의 상이한 모바일 디바이스들을 포함할 수 있다.As described above, the device farm 100 may include a number of different mobile devices configured with various operating systems (OS) and various OS versions.

보다 구체적으로, 서버(200)는 앱 실행 명령을 다수의 모바일 에이전트들(300)로 전달할 수 있다. 다수의 모바일 에이전트들(300)은 서버(200)로부터 앱 실행 명령을 수신하여 대응하는 모바일 디바이스들로 전달하여 앱을 실행시킬 수 있다.More specifically, the server 200 may transmit an app execution command to a plurality of mobile agents 300 . The plurality of mobile agents 300 may receive an app execution command from the server 200 and transmit it to corresponding mobile devices to execute the app.

실시예에서, 앱 공급자 단말기(20)는 클라우드 서비스(cloud service)를 통해 서버(200)로부터 디바이스 팜(100)의 다수의 모바일 디바이스들에서 실행되는 앱의 테스트 결과에 관한 자동 리포트를 제공받을 수 있다.In an embodiment, the app provider terminal 20 may be provided with an automatic report on the test results of the app executed in a plurality of mobile devices of the device farm 100 from the server 200 through a cloud service. have.

서버(200)는 앱의 순차적인 실행들을 위한 케이스 시나리오, 및 케이스 시나리오에 따라 설정되는 자동화 스크립트를 기반으로 다수의 앱 실행 명령들을 순차적으로 생성할 수 있다.The server 200 may sequentially generate a plurality of app execution commands based on a case scenario for sequential execution of the app, and an automation script set according to the case scenario.

자동화 스크립트는 예를 들어, 앱의 실행 화면, 앱에 대해 실행할 이벤트들의 목록에 해당하는 이벤트리스트, 자동화 스크립트의 실행 시작과 종료, 기록, 앱 실행 결과 리포트 확인 등에 관한 명령을 입력할 수 있도록 제공될 수 있다.The automation script may be provided to input commands for, for example, the execution screen of the app, an event list corresponding to the list of events to be executed for the app, start and end execution of the automation script, record, and check the application execution result report. can

자동화 스크립트의 이벤트리스트는 앱에 대한 각 실행 항목을 선택하여 테스트되도록 하거나, 각 실행 항목을 선택 해제하여 테스트하지 않도록 하거나, 각 실행 항목을 삭제할 수 있도록 제공될 수 있다.The event list of the automation script may be provided so that each execution item for the app is selected to be tested, each execution item is deselected to not test, or each execution item can be deleted.

자동화 스크립트는 앱 공급자에 의해 요청된 앱의 테스트 케이스 별로 생성되어 저장될 수 있으며, 테스트 케이스 별로 앱 실행과 관련된 수행 로그가 기록될 수 있다.The automation script may be generated and stored for each test case of the app requested by the app provider, and an execution log related to the execution of the app may be recorded for each test case.

또한, 서버(200)에 의해, 다수의 앱 공급자 단말기(20)에 의해 요청된 앱 실행 테스트 태스크들의 순서를 관리하고, 디바이스 팜(100)의 모바일 디바이스들의 앱 실행 순서를 관리할 수 있다.In addition, by the server 200 , it is possible to manage the order of the app execution test tasks requested by the plurality of app provider terminals 20 , and manage the app execution order of the mobile devices of the device farm 100 .

또한, 서버(200)는 다양한 앱들의 실행들에 관하여 각 모바일 디바이스의 앱 정상 실행 또는 비정상 실행을 통계 처리하여, 각 모바일 디바이스를 통계적으로 분석할 수도 있다.In addition, the server 200 may statistically analyze each mobile device by statistically processing the normal or abnormal execution of the app of each mobile device with respect to the execution of various apps.

테스트 서버(230)는 테스트 자동화 모듈(210) 및 테스트 관리 모듈(220)에 의해 생성되는 실행 명령들을 디바이스 팜(100)의 모바일 디바이스들로 전송하여 모바일 디바이스들에서 앱의 실행을 자동 테스트할 수 있다.The test server 230 transmits execution commands generated by the test automation module 210 and the test management module 220 to the mobile devices of the device farm 100 to automatically test the execution of the app on the mobile devices. have.

한편, 서버(200)는 앱 공급자 단말기(20)로 하여금 디바이스 팜(100)의 모바일 디바이스들 중 앱의 실행을 테스트할 하나 이상의 모바일 디바이스를 선택할 수 있도록 하는 인터페이스를 제공할 수 있다.Meanwhile, the server 200 may provide an interface that allows the app provider terminal 20 to select one or more mobile devices to test the execution of the app from among the mobile devices of the device farm 100 .

서버(200)는 이 인터페이스를 통해 앱 공급자 단말기(20)에 의해 선택된 하나 이상의 모바일 디바이스를 미러링(mirroring)하여 하나 이상의 모바일 디바이스를 병렬적으로 테스트할 수 있다.The server 200 may test one or more mobile devices in parallel by mirroring one or more mobile devices selected by the app provider terminal 20 through this interface.

다음으로, 서버(200)는 앱 실행 명령에 따른 각 모바일 디바이스의 앱 실행에 관련된 테스트 수행 결과에 대한 자동 리포트를 생성하여 앱 공급자 단말기(20)에 제공하는 단계를 수행한다(S130).Next, the server 200 generates an automatic report on the test execution results related to the app execution of each mobile device according to the app execution command and provides it to the app provider terminal 20 (S130).

자동 리포트 출력부(500)는 디바이스 팜(100)의 각 모바일 디바이스에서 실행되는 앱의 테스트 결과에 대한 자동 리포트를 출력할 수 있으며, 디바이스 팜(100)의 각 모바일 디바이스에서 실행되는 앱의 실행 정보는 모바일 에이전트(300)를 통해 서버(200)로 제공될 수 있다.The automatic report output unit 500 may output an automatic report on a test result of an app executed on each mobile device of the device farm 100 , and execution information of an app executed on each mobile device of the device farm 100 . may be provided to the server 200 through the mobile agent 300 .

자동 리포트 출력부(500)는 서버 관리자 단말기에 구비되거나, 혹은 앱 공급자 단말기(20)에 구비될 수 있다. 자동 리포트 출력부(500)는 디바이스 팜(100)의 각 모바일 디바이스 별로 앱 실행 화면, 앱의 실행에 관한 결함 발생 정보, 결함이 발생된 모바일 디바이스 정보 등을 제공할 수 있다.The automatic report output unit 500 may be provided in the server manager terminal, or may be provided in the app provider terminal 20 . The automatic report output unit 500 may provide an app execution screen for each mobile device of the device farm 100 , defect occurrence information related to the execution of the app, and mobile device information in which the defect occurs.

상술한 바와 같은 본 발명의 실시예에 따른 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템 및 이를 이용한 검증 방법에 의하면, 다양한 모바일 디바이스, 각 디바이스에 탑재되는 다양한 운영체제(OS), 및 각기 다른 OS 버젼들에 대한 검증을 위해, 웹 기반으로 하나 이상의 모바일 디바이스들에 대한 검증을 자동화할 수 있다.According to the web-based mobile device verification automation platform system and the verification method using the same according to the embodiment of the present invention as described above, various mobile devices, various operating systems (OSs) mounted on each device, and different OS versions For verification, it is possible to automate verification for one or more mobile devices on a web-based basis.

또한, 본 발명의 실시예에 의하면, 테스트 케이스들을 통합 관리 및 재사용할 수 있도록 하고, 하나의 디바이스에서 다수의 디바이스를 자동으로 제어하며, 테스트 수행 결과에 대한 자동 리포트를 제공하여 누구나 사용할 수 있는 웹 환경의 테스트 서비스 인프라를 구축할 수 있다.In addition, according to an embodiment of the present invention, test cases can be integrated management and reused, multiple devices are automatically controlled from one device, and an automatic report on test execution results is provided so that anyone can use the web. You can build an environment's test service infrastructure.

또한, 본 발명의 실시예에 의하면, iOS의 탈옥(jailbreak)이나 루팅(rooting)을 사용하지 않고도 자동화 테스트가 가능하고, 모바일 디바이스 팜(Farm)을 통해 테스트에 필요한 모바일 디바이스들을 선택 예약하여 모바일 디바이스 자동 검증이 가능하다.In addition, according to an embodiment of the present invention, automated testing is possible without using iOS jailbreak or rooting, and by selecting and reserving mobile devices required for testing through the mobile device farm, the mobile device Automatic verification is possible.

또한, 본 발명의 실시예에 의하면, 스크립트 기반의 개발자 언어가 필요 없이 모델 기반으로 테스트 케이스 구성이 가능하고, 앱 서비스 출시 환경과 동일한 조건으로 테스트 수행이 가능하며, 모바일 디바이스 자동 검증 과정에서의 보안상의 문제도 해결할 수 있다.In addition, according to an embodiment of the present invention, it is possible to configure a model-based test case without the need for a script-based developer language, perform tests under the same conditions as the app service release environment, and secure security in the mobile device automatic verification process The top issue can also be solved.

또한, 본 발명의 실시예에 의하면, 웹 기반으로 통합된 검증 자동화 환경을 제공함으로써, 한정된 인력으로 효과적인 테스트 및 산출물 관리가 가능하고, 표준화된 테스트 관리 환경을 통해 정확한 결과 분석이 가능하며, 단기간에 신속한 테스트가 가능하다.In addition, according to an embodiment of the present invention, by providing a web-based integrated verification automation environment, effective test and product management with limited manpower is possible, accurate result analysis is possible through a standardized test management environment, and in a short time Fast testing is possible.

이상에서 설명된 실시예들의 구성 중 적어도 일부는 하드웨어 구성요소, 소프트웨어 구성요소, 및/ 또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(Arithmetic Logic Unit), 디지털 신호 프로세서(Digital Signal Processor), 마이크로컴퓨터, FPGA(Field Programmable Gate Array), PLU(Programmable Logic Unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다.At least some of the configurations of the above-described embodiments may be implemented as a hardware component, a software component, and/or a combination of the hardware component and the software component. For example, the apparatus, methods and components described in the embodiments may include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate (FPGA). Array), a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions, may be implemented using one or more general purpose or special purpose computers.

처리 장치는 운영 체제 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술 분야에서 통상의 지식을 가진 자는 처리 장치가 복수 개의 처리 요소(Processing Element) 및/또는 복수 유형의 처리요소를 포함할 수 있음을 이해할 것이다.The processing device may run an operating system and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For convenience of understanding, the processing device is sometimes described as being used, but one of ordinary skill in the art will recognize that the processing device includes a plurality of processing elements and/or a plurality of types of processing elements. It will be understood that this may include

예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(Parallel Processor) 와 같은, 다른 처리 구성(Processing configuration)도 가능하다. 소프트웨어는 컴퓨터 프로그램(Computer Program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다.For example, the processing device may include a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a Parallel Processor. The software may include a computer program, code, instructions, or a combination of one or more thereof, which configures a processing device to operate as desired or is independently or collectively processed You can command the device.

소프트웨어 및/ 또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody) 될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software and/or data may be any kind of machine, component, physical device, virtual equipment, computer storage medium or device, to be interpreted by or to provide instructions or data to the processing device. , or may be permanently or temporarily embody in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored in one or more computer-readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and available to those skilled in the art of computer software.

컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CDROM, DVD와 같은 광기록 매체(optical media) 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CDROMs and DVDs, and ROM, RAM, and flash memory. Hardware devices specifically configured to store and execute program instructions, such as, etc. are included. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다. 그러므로, 다른 구현들, 다른 실시예들 및 청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.As described above, although the embodiments have been described with reference to the limited embodiments and drawings, various modifications and variations are possible from the above description by those skilled in the art. For example, the described techniques are performed in an order different from the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result. Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

10: 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템
100: 디바이스 팜
200: 서버
300: 모바일 에이전트
400: 앱 실행 명령 입력부
500: 자동 리포트 출력부
10: Web-based mobile device verification automation platform system
100: device farm
200: server
300: mobile agent
400: App execution command input unit
500: automatic report output unit

Claims (10)

다양한 운영체제들(OS) 및 다양한 OS 버젼들로 이루어지는 다수의 모바일 디바이스들을 포함하는 디바이스 팜;
웹 기반으로 앱 공급자 단말기로부터 앱의 실행에 관련된 테스트를 요청받고, 앱 실행 명령을 상기 다수의 모바일 디바이스들에 전달하여 상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키고, 상기 앱 실행 명령에 따른 각 모바일 디바이스의 앱 실행에 관련된 테스트 수행 결과에 대한 자동 리포트를 생성하여 상기 앱 공급자 단말기에 제공하도록 구성되는 서버; 및
상기 다양한 운영체제들 및 상기 다양한 OS 버젼들에 대응하는 다수의 모바일 에이전트들을 포함하고,
상기 서버는 상기 앱 실행 명령을 상기 다수의 모바일 에이전트들로 전달하도록 구성되고,
상기 다수의 모바일 에이전트들은 상기 앱 실행 명령을 수신하여 대응하는 모바일 디바이스들로 전달하여 상기 앱을 실행시키도록 구성되고,
상기 서버는 상기 모바일 디바이스들에서 상기 앱을 자동으로 실행시켜 테스트하도록 구성되는 테스트 자동화 모듈을 포함하고,
상기 테스트 자동화 모듈은:
상기 앱의 순차적인 실행들을 위한 케이스 시나리오가 설정되는 케이스/시나리오 관리부;
상기 앱의 순차적인 실행들에 관련된 케이스 시나리오에 따라 자동화 스크립트가 설정되는 자동화 스크립트부; 및
상기 케이스 시나리오 및 상기 자동화 스크립트를 기반으로 다수의 앱 실행 명령들을 순차적으로 생성하여 상기 모바일 디바이스들로 전송하고, 상기 모바일 디바이스들에서의 상기 앱의 실행을 자동 테스트하도록 구성되는 자동화 테스트 수행부를 포함하고,
상기 자동화 스크립트는 앱의 실행 화면, 앱에 대해 실행할 이벤트들의 목록에 해당하는 이벤트리스트, 자동화 스크립트의 실행 시작과 종료, 기록, 및 앱 실행 결과 리포트 확인에 관한 명령을 입력할 수 있도록 제공되고,
상기 서버는 상기 앱 공급자 단말기로 하여금 상기 모바일 디바이스들 중 상기 앱의 실행을 테스트할 하나 이상의 모바일 디바이스를 선택할 수 있도록 하는 인터페이스를 제공하도록 구성되고,
상기 서버는 상기 인터페이스를 통해 선택된 상기 하나 이상의 모바일 디바이스를 미러링(mirroring)하여 상기 하나 이상의 모바일 디바이스를 병렬적으로 테스트하도록 구성되고,
상기 서버는 다양한 앱들의 실행들에 관하여 각 모바일 디바이스의 앱 정상 실행 및 비정상 실행을 통계 처리하여 각 모바일 디바이스를 통계적으로 분석하고, 앱의 다양한 유형 별로 상기 모바일 디바이스의 앱 실행을 분석하여 앱의 실행에 적합한 모바일 디바이스와 앱의 실행에 부적합한 모바일 디바이스를 분석하도록 구성되고,
상기 디바이스 팜의 각 모바일 디바이스 별로 앱 실행 화면, 앱의 실행에 관한 결함 발생 정보, 및 결함이 발생된 모바일 디바이스 정보를 제공하도록 구성되는 자동 리포트 출력부를 더 포함하는, 웹 기반 모바일 디바이스 검증 자동화 플랫폼 시스템.
a device farm comprising a number of mobile devices comprising various operating systems (OSs) and various OS versions;
A web-based test related to the execution of the app is requested from the app provider terminal, and the app execution command is transmitted to the plurality of mobile devices to execute the app in the plurality of mobile devices, and each a server configured to generate an automatic report on a test result related to an app execution of a mobile device and provide it to the app provider terminal; and
a plurality of mobile agents corresponding to the various operating systems and the various OS versions;
the server is configured to forward the app execution command to the plurality of mobile agents;
The plurality of mobile agents are configured to receive the app execution command and deliver it to corresponding mobile devices to execute the app,
The server includes a test automation module configured to automatically run and test the app on the mobile devices,
The test automation module includes:
a case/scenario manager in which case scenarios for sequential execution of the app are set;
an automation script unit in which an automation script is set according to a case scenario related to sequential executions of the app; and
An automated test performing unit configured to sequentially generate and transmit a plurality of app execution commands to the mobile devices based on the case scenario and the automation script, and automatically test the execution of the app in the mobile devices, and ,
The automation script is provided so as to input commands related to the execution screen of the app, the event list corresponding to the list of events to be executed for the app, the execution start and end of the automation script, record, and the application execution result report confirmation,
the server is configured to provide an interface that allows the app provider terminal to select one or more mobile devices to test execution of the app among the mobile devices,
the server is configured to test the one or more mobile devices in parallel by mirroring the one or more mobile devices selected through the interface;
The server statistically analyzes each mobile device by statistically processing the normal and abnormal execution of the app of each mobile device with respect to the execution of various apps, and analyzes the app execution of the mobile device for each type of app to run the app configured to analyze mobile devices suitable for and mobile devices that are not suitable for running the app,
Web-based mobile device verification automation platform system, further comprising an automatic report output unit configured to provide an app execution screen for each mobile device in the device farm, defect occurrence information related to the execution of the app, and mobile device information in which the defect has occurred .
삭제delete 삭제delete 삭제delete 삭제delete 서버가 웹 기반으로 앱 공급자 단말기로부터 앱의 실행에 관련된 테스트를 요청받는 단계;
상기 서버가 앱 실행 명령을 디바이스 팜의 다수의 모바일 디바이스들에 전달하여 상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계; 및
상기 서버가 상기 앱 실행 명령에 따른 각 모바일 디바이스의 앱 실행에 관련된 테스트 수행 결과에 대한 자동 리포트를 생성하여 상기 앱 공급자 단말기에 제공하는 단계를 포함하고,
상기 디바이스 팜은 다양한 운영체제들(OS) 및 다양한 OS 버젼들로 이루어지는 모바일 디바이스들을 포함하고,
상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계는:
상기 서버가 상기 앱 실행 명령을 상기 다양한 운영체제들 및 상기 다양한 OS 버젼들에 대응하는 다수의 모바일 에이전트들로 전달하는 단계; 및
상기 다수의 모바일 에이전트가 상기 서버로부터 상기 앱 실행 명령을 수신하고 대응하는 모바일 디바이스들로 전달하여 상기 앱을 실행시키는 단계를 포함하고,
상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계는:
상기 서버가 상기 앱의 순차적인 실행들을 위한 케이스 시나리오와, 상기 케이스 시나리오에 따라 설정되는 자동화 스크립트를 기반으로, 다수의 앱 실행 명령들을 순차적으로 생성하여 상기 모바일 디바이스들로 전송함으로써, 상기 모바일 디바이스들에서의 상기 앱의 실행들을 자동 테스트하는 단계를 포함하고,
상기 자동화 스크립트는 앱의 실행 화면, 앱에 대해 실행할 이벤트들의 목록에 해당하는 이벤트리스트, 자동화 스크립트의 실행 시작과 종료, 기록, 및 앱 실행 결과 리포트 확인에 관한 명령을 입력할 수 있도록 제공되고,
상기 다수의 모바일 디바이스들에서 상기 앱을 실행시키는 단계는:
상기 서버에 의해, 상기 앱 공급자 단말기로 하여금 상기 다수의 모바일 디바이스들 중 상기 앱의 실행을 테스트할 하나 이상의 모바일 디바이스를 선택할 수 있도록 하는 인터페이스를 제공하는 단계; 및
상기 서버에 의해, 상기 인터페이스를 통해 선택된 상기 하나 이상의 모바일 디바이스를 미러링(mirroring)하여 상기 하나 이상의 모바일 디바이스를 병렬적으로 테스트하는 단계를 포함하고,
상기 자동 리포트를 생성하여 상기 앱 공급자 단말기에 제공하는 단계는:
상기 서버에 의해 다양한 앱들의 실행들에 관하여 각 모바일 디바이스의 앱 정상 실행 및 비정상 실행을 통계 처리하여 각 모바일 디바이스를 통계적으로 분석하고, 앱의 다양한 유형 별로 상기 모바일 디바이스의 앱 실행을 분석하여 앱의 실행에 적합한 모바일 디바이스와 앱의 실행에 부적합한 모바일 디바이스를 분석하는 단계; 및
자동 리포트 출력부에 의해, 상기 디바이스 팜의 각 모바일 디바이스 별로 앱 실행 화면, 앱의 실행에 관한 결함 발생 정보, 및 결함이 발생된 모바일 디바이스 정보를 제공하는 단계를 포함하는, 웹 기반 모바일 디바이스 검증 자동화 플랫폼을 이용한 검증 방법.
receiving, by the server, a web-based test related to the execution of the app from the app provider terminal;
transmitting, by the server, an app execution command to a plurality of mobile devices in a device farm to execute the app in the plurality of mobile devices; and
Comprising the step of generating, by the server, an automatic report on the test execution results related to the execution of the app of each mobile device according to the app execution command and providing it to the app provider terminal,
The device farm includes mobile devices consisting of various operating systems (OS) and various OS versions,
Running the app on the plurality of mobile devices includes:
transmitting, by the server, the app execution command to the various operating systems and a plurality of mobile agents corresponding to the various OS versions; and
Comprising the step of receiving, by the plurality of mobile agents, the app execution command from the server and transmitting the command to corresponding mobile devices to execute the app,
Running the app on the plurality of mobile devices includes:
The server sequentially generates a plurality of app execution commands based on a case scenario for sequential execution of the app and an automation script set according to the case scenario and transmits them to the mobile devices, so that the mobile devices automatically testing the executions of the app in
The automation script is provided so as to input a command related to the execution screen of the app, an event list corresponding to a list of events to be executed for the app, start and end of execution of the automation script, record, and check the application execution result report,
Running the app on the plurality of mobile devices includes:
providing, by the server, an interface allowing the app provider terminal to select one or more mobile devices to test execution of the app from among the plurality of mobile devices; and
testing, by the server, the one or more mobile devices in parallel by mirroring the one or more mobile devices selected through the interface;
The step of generating the automatic report and providing it to the app provider terminal includes:
Statistically analyze each mobile device by statistically processing the normal and abnormal execution of the app of each mobile device with respect to the execution of various apps by the server, and analyze the app execution of the mobile device for various types of apps analyzing a mobile device suitable for execution and a mobile device unsuitable for running the app; and
Web-based mobile device verification automation, comprising the step of providing, by an automatic report output unit, an app execution screen, defect occurrence information regarding the execution of the app, and mobile device information in which the defect occurred for each mobile device in the device farm Validation method using the platform.
삭제delete 삭제delete 삭제delete 제6항에 기재된 웹 기반 모바일 디바이스 검증 자동화 플랫폼을 이용한 검증 방법을 실행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.A computer-readable recording medium in which a program for executing the verification method using the web-based mobile device verification automation platform according to claim 6 is recorded.
KR1020200132014A 2020-10-13 2020-10-13 Mobile Device verification automation platform system based on web and verification method of the same KR102430523B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200132014A KR102430523B1 (en) 2020-10-13 2020-10-13 Mobile Device verification automation platform system based on web and verification method of the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200132014A KR102430523B1 (en) 2020-10-13 2020-10-13 Mobile Device verification automation platform system based on web and verification method of the same

Publications (2)

Publication Number Publication Date
KR20220048758A KR20220048758A (en) 2022-04-20
KR102430523B1 true KR102430523B1 (en) 2022-08-08

Family

ID=81403709

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200132014A KR102430523B1 (en) 2020-10-13 2020-10-13 Mobile Device verification automation platform system based on web and verification method of the same

Country Status (1)

Country Link
KR (1) KR102430523B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150082282A1 (en) 2013-09-17 2015-03-19 Xamarin Inc. Mobile application testing platform
US9274935B1 (en) 2013-01-15 2016-03-01 Google Inc. Application testing system with application programming interface

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130007763A (en) * 2011-07-11 2013-01-21 (주)엔토시스 Remote applications verification system and method thereof
KR20140110520A (en) * 2013-03-08 2014-09-17 주식회사 인프라웨어테크놀러지 Method for automatic verification for samrt applications by automatic execution control of test terminals, and computer-readable recording medium for the same
KR101731293B1 (en) * 2014-08-14 2017-05-02 엔에이치엔엔터테인먼트 주식회사 Mobile terminal test system and mobile terminal test method using the system
KR101698029B1 (en) * 2015-02-13 2017-01-20 어니컴 주식회사 System and method for automatic application test using script

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9274935B1 (en) 2013-01-15 2016-03-01 Google Inc. Application testing system with application programming interface
US20150082282A1 (en) 2013-09-17 2015-03-19 Xamarin Inc. Mobile application testing platform

Also Published As

Publication number Publication date
KR20220048758A (en) 2022-04-20

Similar Documents

Publication Publication Date Title
US9294296B2 (en) Automated test execution in a shared virtualized resource pool
WO2020140820A1 (en) Software testing method, system, apparatus, device, medium, and computer program product
US9846638B2 (en) Exposing method related data calls during testing in an event driven, multichannel architecture
US10853232B2 (en) Adaptive system for mobile device testing
CN110347395B (en) Software release method and device based on cloud computing platform
US9967154B2 (en) Advanced customer support services—advanced support cloud portal
US10083027B2 (en) Systems and methods for managing software development environments
US7895565B1 (en) Integrated system and method for validating the functionality and performance of software applications
US10671510B1 (en) Techniques for evaluating collected build metrics during a software build process
CN111651366B (en) SDK test method, device, equipment and storage medium
US20090307763A1 (en) Automated Test Management System and Method
US8731896B2 (en) Virtual testbed for system verification test
KR20140110520A (en) Method for automatic verification for samrt applications by automatic execution control of test terminals, and computer-readable recording medium for the same
CN110347085B (en) Automated test system, method, vehicle, and computer-readable medium
CN104765678A (en) Method and device for testing applications on mobile terminal
US9292423B1 (en) Monitoring applications for compatibility issues
CN105426298A (en) ADB (Android debug bridge)-based software test method and system
US11113183B2 (en) Automated device test triaging system and techniques
KR102243379B1 (en) Method and apparatus for automating game test
US10657023B1 (en) Techniques for collecting and reporting build metrics using a shared build mechanism
US11237948B2 (en) Rendering engine component abstraction system
US9195562B2 (en) Recording external processes
KR102430523B1 (en) Mobile Device verification automation platform system based on web and verification method of the same
KR20140121583A (en) Method and system for certifying application
KR20140122414A (en) Management system and method for certifying process

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant