KR102653375B1 - 테스트를 관리하는 방법 및 이를 지원하는 전자 장치 - Google Patents

Abstract

전자 장치에서 애플리케이션 테스트 관리 방법에 있어서, 설정 영역을 통해서 수신되는 사용자의 입력을 기반으로 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보를 포함하는 제1정보를 확인하는 단계;
상기 제1정보에 기반하여 생성된 테스트 설정 정보를 확인하는 단계; 및
상기 테스트 설정 정보를 기반으로 확인된 테스트 장치 및 테스트 애플리케이션을 사용하여 상기 테스트 애플리케이션의 구동에 대응하는 출력 정보를 제공하는 단계를 포함하는, 테스트 관리 방법이 개시된다.

Description

테스트를 관리하는 방법 및 이를 지원하는 전자 장치{METHOD FOR MANAGING TEST AND ELECTRONIC APPARATUS SUPPORTING THEREOF}

본 발명은 테스트를 관리하는 전자 장치 및 그 방법에 관한 것이다.

서비스의 종류가 다양화되고 각 서비스에 대한 요구 사항이 고도화됨에 따라, 서비스의 기능이 제대로 구현되는지, 다른 기능과의 충돌은 없는지 등을 사전에 세세히 테스트하는 것이 보편화되었다. 대부분의 서비스 개발은 팀 단위로 이루어지기 때문에, 이러한 테스트를 효율적으로 수행하기 위해서 팀원들이 이용할 수 있는 공통의 테스트 설정 환경을 수립하는 것이 중요하다. 서비스의 기능이 구체화 될수록 테스트 설정 환경에 대한 세부적인 환경 설정이 필요하다.

그런데, 서비스의 기능이 고도화되고 구체화 될수록 마찬가지로 테스트를 진행할 개발 구성원 각각의 직무 및 환경이 다양화 되며, 진행할 테스트의 종류 역시 다양화 되고 있다. 따라서 구성원 각각에 대하여 테스트 환경을 자체적으로 구현하거나 구성하도록 하는 것은 각 구성원의 직무 및 환경에 따른 제한을 받을 수 있다. 또한 테스트를 진행하기 위하여 구성원 각각이 다양한 환경에 대한 세부적인 설정을 일일이 수행하는 것은 개발 구성원들 간 공통적인 테스트 환경을 구축하는 데에 제약을 일으킬 수 있다.

테스트 과정에서 사용자의 편의성, 직관성을 고려하며 다양한 테스트 환경을 일원적으로 제공할 수 있는 테스트 설정 환경의 제공이 필요하다.

관련하여, KR1365260B1 등의 선행문헌들을 참조할 수 있다.

본 발명의 방법에 따르면, 전자 장치는 애플리케이션의 테스트 관리 방법을 제공할 수 있다.

본 발명의 방법에 따르면, 전자 장치는 하나의 테스트 툴을 통하여 테스트의 대상이 되는 장치에 관한 설정 및 테스트 대상이 되는 애플리케이션에 관한 설정을 제공할 수 있다.

본 발명의 방법에 따르면, 전자 장치는 테스트에 필요한 대상 장치에 관한 설정, 대상 애플리케이션에 관한 설정, 테스트를 진행하기 위한 세부 환경에 관한 설정을 적용한 테스트 장치 및 테스트 애플리케이션을 제공할 수 있다.

본 발명의 방법에 따르면, 전자 장치는 테스트 툴을 통하여 테스트 장치 및 테스트 애플리케이션을 이용한 테스트를 사용자가 수행할 수 있도록 하며, 이에 따른 테스트 장치의 출력 정보를 제공할 수 있다.

본 발명의 방법에 따르면, 전자 장치는 생성된 테스트 설정 정보를 사용자 간에 용이하게 공유하도록 할 수 있다.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

다양한 실시예들은, 테스트를 관리하는 방법 및 이를 지원하는 전자 장치를 제공할 수 있다.

본 문서에 개시된 다양한 실시예들에 따른 전자 장치에서 애플리케이션 테스트 관리 방법은, 설정 영역을 통해서 수신되는 사용자의 입력을 기반으로 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보를 포함하는 제1정보를 확인하는 단계; 상기 제1정보에 기반하여 생성된 테스트 설정 정보를 확인하는 단계; 및 상기 테스트 설정 정보를 기반으로 확인된 테스트 장치 및 테스트 애플리케이션을 사용하여 상기 테스트 애플리케이션의 구동에 대응하는 출력 정보를 제공하는 단계를 포함할 수 있다.

실시예에서, 상기 대상 장치 설정 정보를 기반으로 확인된 상기 테스트 장치에 상기 대상 애플리케이션 설정 정보를 기반으로 확인된 상기 테스트 애플리케이션이 설치될 수 있다.

실시예에서, 상기 테스트 관리 방법은, 상기 대상 장치 설정 정보에 기반하여 확인되는 상기 테스트 장치에 관한 정보 및 상기 대상 애플리케이션 설정 정보에 기반하여 확인되는 테스트 애플리케이션에 관한 정보를 제공하는 단계를 더 포함할 수 있다.

실시예에서, 상기 테스트 설정 정보에 대응하는 테스트 설정에 관한 식별 정보가 할당되며, 상기 테스트 관리 방법은, 상기 식별 정보에 대응하는 요청이 수신되면, 상기 테스트 장치 및 테스트 애플리케이션을 사용한 테스트 환경을 제공하는 단계를 더 포함할 수 있다.

실시예에서, 상기 테스트 관리 방법은, 테스트 설정에 관한 식별 정보를 확인하는 단계; 상기 식별 정보에 대응하는 테스트 설정 정보를 확인하는 단계; 및 상기 테스트 설정 정보에 기반하여 확인된 테스트 장치 및 테스트 애플리케이션을 사용하여 상기 출력 정보를 제공하는 단계를 더 포함할 수 있다.

실시예에서, 상기 대상 장치 설정 정보는, 상기 테스트 장치에 대응하는 운영체제(Operation System; OS)의 타입 정보, 상기 운영체제의 버전 정보 및 상기 테스트 장치에 대응하는 해상도 정보 가운데 적어도 하나를 포함할 수 있다.

실시예에서, 상기 제1정보를 확인하는 단계는, 상기 사용자로부터 상기 대상 장치 설정 정보를 수신하기 위하여, 상기 설정 영역을 통해 제1그래픽 기반 인터페이스(Graphical User Interface; GUI)를 제공하는 단계; 및 상기 제1그래픽 기반 인터페이스를 통해 수신한 사용자 입력에 기반하여 상기 대상 장치 설정 정보를 수신하는 단계를 포함할 수 있다.

실시예에서, 상기 대상 애플리케이션 설정 정보는, 대상 애플리케이션에 관한 정보, 상기 대상 애플리케이션에 대응하는 대상 리포지토리 정보 및 상기 대상 리포지토리 정보에 대응하는 적어도 하나의 대상 브랜치 정보 가운데 적어도 하나를 포함할 수 있다.

실시예에서, 상기 제1정보를 확인하는 단계는, 상기 사용자로부터 상기 대상 애플리케이션 설정 정보를 수신하기 위하여, 상기 설정 영역을 통해 제2그래픽 기반 인터페이스를 제공하는 단계; 상기 제2그래픽 기반 인터페이스를 통해 테스트의 대상이 되는 하나 이상의 후보 애플리케이션에 관한 정보, 상기 하나 이상의 후보 애플리케이션에 대응하는 하나 이상의 리포지토리에 대한 목록, 상기 하나 이상의 리포지토리에 대응하는 하나 이상의 브랜치 정보를 제공하는 단계; 및 상기 제2그래픽 기반 인터페이스를 통해 수신한 사용자 입력에 기반하여 상기 대상 애플리케이션 설정 정보를 확인하는 단계를 포함할 수 있다.

실시예에서, 상기 제1정보는 세부 환경 설정 정보를 더 포함하고, 상기 제1정보를 확인하는 단계는, 상기 사용자로부터 세부 환경 설정 정보를 수신하기 위하여, 상기 설정 영역을 통해 제3그래픽 기반 인터페이스를 제공하는 단계; 상기 제3그래픽 기반 인터페이스를 통해 수신한 사용자 입력에 기반하여 상기 세부 환경 설정 정보를 수신하는 단계를 포함할 수 있다.

실시예에서, 상기 세부 환경 설정 정보는, 테스트 계정 정보, 테스트에 대응하는 테스트 계정 할당 정보, API(Application Programming Interface) 정보, API 요청 또는 API 응답에 관한 모킹 정보, 테스트를 수행하기 위한 스테이징 서버(staging server) 정보 가운데 적어도 일부를 포함할 수 있다.

실시예에서, 상기 제1정보는, 상기 사용자로부터 상기 설정 영역을 통해 제공되는 제4그래픽 기반 인터페이스를 통해 수신한, 상기 테스트에 관한 UI 자동화(User Interface automation) 정보 및 애플리케이션 스킴(application scheme) 정보 가운데 적어도 하나를 포함하고, 상기 출력 정보를 제공하는 단계는, 상기 UI 자동화 정보 및 상기 애플리케이션 스킴 정보 가운데 적어도 하나에 기반하여 상기 테스트 애플리케이션의 동작을 제어하는 단계를 더 포함할 수 있다.

실시예에서, 상기 테스트 관리 방법은, 상기 테스트 애플리케이션의 구동 중에 상기 테스트 애플리케이션의 동작을 제어하기 위한 설정 정보를 더 수신하는 단계; 및 상기 설정 정보에 기반하는 테스트 애플리케이션의 동작을 요청하는 사용자 입력에 기반하여 상기 테스트 애플리케이션의 동작에 대응하는 출력 정보를 제공하는 단계를 더 포함할 수 있다.

실시예에서, 상기 테스트 애플리케이션의 동작은, 푸시(push) 알림 동작을 포함하고, 상기 설정 정보는, 상기 푸시 알림 동작에 대응하는 토큰(token) 정보를 포함할 수 있다.

실시예에서, 상기 테스트 장치를 실행하는 단계는 상기 대상 장치 설정 정보에 기반하여, 상기 전자 장치와 연결되는 테스트 장치를 확인하는 단계; 상기 대상 애플리케이션 설정 정보에 기반하여 확인되는 상기 테스트 애플리케이션에 관련된 데이터를 빌드(build) 및/또는 상기 테스트 장치에 설치하는 단계; 및 상기 테스트 장치의 구동에 따른 출력 정보를 획득하는 단계를 포함할 수 있다.

실시예에서, 상기 출력 정보를 제공하는 단계는, 상기 설정 영역과 대응하는 출력 영역을 포함하는 제5그래픽 기반 인터페이스를 제공하는 단계; 상기 제5그래픽 기반 인터페이스를 통해 상기 테스트의 수행에 관한 사용자 입력을 수신하는 단계; 및 상기 사용자 입력에 기반하여 상기 테스트 장치에 대한 입력을 수행하는 단계; 및 상기 테스트 장치에 대한 입력에 대응하는 상기 테스트 장치의 동작 결과에 관한 정보를 포함하는 출력 정보를 상기 출력 영역에 표시하는 단계를 포함할 수 있다.

실시예에서, 상기 테스트 애플리케이션의 구동에 대응하여, 상기 테스트 설정 정보에 대응하는 테스트에 관한 인스턴스(instance) 정보를 생성하는 단계; 상기 테스트의 수행과 관련된 사용자 입력에 관한 정보를 확인하는 단계; 및 상기 사용자 입력에 관한 정보를 상기 인스턴스 정보에 매핑하는 단계를 더 포함할 수 있다.

실시예에서, 버그 리포트(bug report)에 관한 사용자 요청 수신하는 단계; 및 상기 사용자 요청에 기반하여, 상기 테스트 설정 정보, 상기 인스턴스 정보, 상기 테스트를 수행한 사용자 정보, 사용자의 추가 입력에 기반하여 수신한 버그 상세 정보 가운데 적어도 일부를 포함하는 버그 리포트 정보 저장하는 단계를 더 포함할 수 있다.

본 문서에 개시된 다양한 실시예들에 따른 전자 장치는, 통신부; 및 프로세서를 포함하고, 상기 프로세서는, 설정 영역을 통해서 수신되는 사용자의 입력을 기반으로 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보를 포함하는 제1정보를 확인하고, 상기 제1정보에 기반하여 생성된 테스트 설정 정보를 확인하고, 상기 테스트 설정 정보를 기반으로 확인된 테스트 장치 및 테스트 애플리케이션을 사용하여 상기 테스트 애플리케이션의 구동에 대응하는 출력 정보를 제공하도록 설정될 수 있다.

본 발명의 방법에 따르면, 전자 장치는 테스트 관리 방법을 제공할 수 있다.

본 발명의 방법에 따르면, 전자 장치는 테스트 툴을 통해 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보를 일원적으로 확인할 수 있고, 이들을 포함하는 테스트 설정 정보를 기반으로 테스트 환경을 사용자에게 제공함으로써 보다 직관적이고 효율적인 테스트 환경 설정을 제공할 수 있다.

본 발명의 방법에 따르면, 전자 장치는 테스트 설정에 관한 식별 정보에 기반하여 테스트 설정 정보를 확인할 수 있고, 이에 따라 사용자들 간에 테스트 설정에 관한 식별정보만으로 테스트 설정에 관한 세부사항을 공유하는 것이 가능하도록 할 수 있다.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

도 1은 다양한 실시예들에 따른 전자 장치가 테스트를 관리하는 방법이 구현될 수 있는 테스트 관리 시스템을 설명하기 위한 도면이다.
도 2는 다양한 실시예들에 따른 전자 장치, 사용자 장치, 서버 장치 및 테스트 장치의 구성을 도시한 도면이다.
도 3은 다양한 실시예들에 따른 테스트 관리 시스템의 동작 방법을 나타낸 흐름도이다.
도 4는 다양한 실시예들에 따른 테스트 설정에 관한 식별 정보에 기반하여 테스트 환경을 제공하는 방법을 설명하기 위한 흐름도이다.
도 5는 다양한 실시예들에 따른 전자 장치가 제공하는 테스트 툴을 설명하기 위한 도면이다.
도 6은 다양한 실시예들에 따른 대상 장치 설정 정보를 수신하기 위한 제1그래픽 기반 인터페이스를 설명하기 위한 도면이다.
도 7은 다양한 실시예들에 따른 대상 애플리케이션 정보를 수신하기 위한 제2그래픽 기반 인터페이스를 설명하기 위한 도면이다.
도 8은 다양한 실시예들에 따른 세부 환경 설정 정보를 수신하기 위한 제3그래픽 기반 인터페이스를 설명하기 위한 도면이다.
도 9는 다양한 실시예들에 따른 제4그래픽 기반 인터페이스를 설명하기 위한 도면이다.
도 10은 다양한 실시예들에 따른 제5그래픽 기반 인터페이스를 설명하기 위한 도면이다.
도 11은 다양한 실시예들에 따른 전자 장치가 수행하는 인스턴스 정보 생성에 관한 동작 흐름도이다.

이하의 실시예들은 다양한 실시예들의 구성요소들과 특징들을 소정 형태로 결합한 것들이다. 각 구성요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려될 수 있다. 각 구성요소 또는 특징은 다른 구성요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성요소들 및 특징들을 결합하여 다양한 실시예들을 구성할 수도 있다. 다양한 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다.

도면에 대한 설명에서, 다양한 실시예들의 요지를 흐릴 수 있는 절차 또는 단계 등은 기술하지 않았으며, 당해 기술분야에서 통상의 지식을 가진 자의 수준에서 이해할 수 있을 정도의 절차 또는 단계는 또한 기술하지 아니하였다.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함(comprising 또는 including)"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "...부", "...기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다. 또한, "일(a 또는 an)", "하나(one)", "그(the)" 및 유사 관련어는 다양한 실시예들을 기술하는 문맥에 있어서(특히, 이하의 청구항의 문맥에서) 본 명세서에 달리 지시되거나 문맥에 의해 분명하게 반박되지 않는 한, 단수 및 복수 모두를 포함하는 의미로 사용될 수 있다.

이하, 다양한 실시예들에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 다양한 실시예들의 예시적인 실시형태를 설명하고자 하는 것이며, 유일한 실시형태를 나타내고자 하는 것이 아니다.

또한, 다양한 실시예들에서 사용되는 특정(特定) 용어들은 다양한 실시예들의 이해를 돕기 위해서 제공된 것이며, 이러한 특정 용어의 사용은 다양한 실시예들의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.

이 때, 처리 흐름도 도면들의 각 블록과 흐름도 도면들의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수 있음을 이해할 수 있을 것이다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도 블록(들)에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도 블록(들)에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도 블록(들)에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.

또한, 각 블록은 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실행 예들에서는 블록들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.

도 1은 다양한 실시예들에 따른 전자 장치가 테스트를 관리하는 방법이 구현될 수 있는 테스트 관리 시스템을 설명하기 위한 도면이다.

도 1을 참조하면, 다양한 실시예들에 따른 테스트 관리 시스템(100)은 다양한 종류의 장치들에 구현될 수 있다. 예를 들어, 테스트 관리 시스템(100)은 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)에 구현될 수 있다. 달리 말해, 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)는 각각의 장치에 구현된 테스트 관리 시스템(100)을 기반으로, 본 개시의 다양한 실시예들에 따른 동작을 수행할 수 있다. 한편, 다양한 실시예들에 따른 테스트 관리 시스템(100)은, 상기 도 1에 도시된 바에 국한되지 않고, 더 다양한 전자 장치와 서버들에 구현될 수도 있을 것이다.

다양한 실시예들에 따른 전자 장치(101)는, 하나 이상의 사용자 장치(102)와 무선 및 유선 통신을 수행하며, 대단위의 저장 용량을 갖는 스토리지를 포함하는 장치일 수 있다. 예를 들어, 전자 장치(101)는 하나 이상의 사용자 장치(102a, 102b)와 연결된 클라우드 디바이스(Cloud device)일 수 있다.

다양한 실시예들에 따른 사용자 장치(102)는, 데스크탑 피시, 태블릿 피시, 모바일 단말 등의 개인 사용자에 의해 이용될 수 있는 장치일 수 있다. 이외에도 유사한 기능을 수행하는 다른 전자 장치들이 사용자 장치(102)로 이용될 수 있다.

다양한 실시예들에 따른 서버 장치(103)는 전자 장치(101)와 무선 및 유선 통신을 수행하며, 대단위의 저장 용량을 갖는 스토리지를 포함하는 장치일 수 있다.

다양한 실시예들에 따른 테스트 장치(104)는 전자 장치(101)와 무선 및 유선 통신을 수행하며, 태블릿 피시, 모바일 단말 등의 장치 또는 이들이 다른 종류의 장치에 구현된 에뮬레이터(emulator)일 수 있다. 테스트 장치(104)가 에뮬레이터로써 구현되는 경우, 테스트 장치(104)는 별도의 독립된 하드웨어를 가지는 장치가 아닌, 전자 장치(101) 또는 서버 장치(103) 내에서 소프트웨어(예: 에뮬레이터 프로그램)으로써 구현되는 가상의 장치일 수 있다.

다양한 실시예들에 따른 테스트 관리 시스템(100)은 동작을 위한 다양한 모듈들을 포함할 수 있다. 테스트 관리 시스템(100)에 포함된 모듈들은 테스트 관리 시스템(100)이 구현되는(또는, 물리적 장치에 포함되는) 물리적 장치(예: 전자 장치(101))가 지정된 동작을 수행할 수 있도록 구현된 컴퓨터 코드 내지는 하나 이상의 인스트럭션 (instruction) 일 수 있다. 다시 말해, 테스트 관리 시스템(100)이 구현되는 물리적 장치는 복수 개의 모듈들을 컴퓨터 코드 형태로 메모리에 저장하고, 메모리에 저장된 복수 개의 모듈들이 실행되는 경우 복수 개의 모듈들은 물리적 장치가 복수 개의 모듈들에 대응하는 지정된 동작들을 수행하도록 할 수 있다.

실시예에 따라, 테스트를 관리하는 시스템(100)은 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 및 그 외 외부 장치 중 적어도 일부 간의 정보 송수신을 지원하는 네트워크 망을 더 포함할 수 있다.

전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 각각은 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어, 또는, 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.

한편 실시예 전반에서 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)는 분리된 장치 및 서버로 언급되나 이는 논리적으로 나누어진 구조일 수 있으며, 하나의 장치 또는 서버에서 분리된 기능에 의해 구현될 수 있다. 예컨대, 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 중 적어도 일부는 전자 장치(101)에 포함되거나 전자 장치(101)와 결합되어 일체로서 구성될 수 있다. 다만, 이러한 경우에도 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 간의 데이터 송수신에 의하여 수행되는 일련의 테스트 관리 방법은 유사하게 수행될 수 있다. 전자 장치(101)에 포함되거나 전자 장치(101)와 결합되어 일체로서 구성되는 장치의 경우, 전자 장치(101)와의 통신은 장치 내부에서 그 구성 요소들 간에(예컨대, 전자 장치(101)의 프로세서와) 데이터를 주고받는 과정으로 이해될 수 있다.

이하에서는 설명의 편의를 위하여 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)가 전자 장치(101)와 별개의 장치 또는 서버로 존재하는 실시예들을 설명하되, 이하의 설명은 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 중 적어도 일부가 전자 장치(101)에 포함되거나 전자 장치(101)와 결합되어 일체로서 구성되는 경우에도 준용될 수 있다.

일실시예에 따르면, 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)는 네트워크 서버로 구현되는 다수의 컴퓨터 시스템 또는 컴퓨터 소프트웨어를 포함할 수 있다. 예를 들면, 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 중 적어도 일부는 인트라넷 또는 인터넷과 같은 컴퓨터 네트워크를 통해 다른 네트워크 서버와 통신할 수 있는 하위 장치와 연결되어 작업 수행 요청을 접수하고, 그에 대한 작업을 수행하여 수행 결과를 제공하는 컴퓨터 시스템 및 컴퓨터 소프트웨어를 지칭할 수 있다. 이외에도, 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 중 적어도 일부는 네트워크 서버 상에서 동작할 수 있는 일련의 응용 프로그램과, 내부에 구축되어 있는 각종 데이터베이스를 포함하는 광의의 개념으로 이해될 수 있다. 예컨대, 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104) 중 적어도 일부는 도스(DOS), 윈도우(Windows), 리눅스(Linux), 유닉스(UNIX), 또는 맥OS(MacOS) 등의 운영 체제에 따라 다양하게 제공되는 네트워크 서버 프로그램을 이용하여 구현될 수 있다.

도 2는 다양한 실시예들에 따른 전자 장치, 사용자 장치, 서버 장치 및 테스트 장치의 구성을 도시한 도면이다.

도 2를 참조하면, 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)는 입/출력부(210), 통신부(220), 스토리지(230) 및 프로세서(240)를 포함할 수 있다.

입/출력부(210)는 사용자 입력을 받거나 또는 사용자에게 정보를 출력하는 각종 인터페이스나 연결 포트 등일 수 있다. 입/출력부(210)는 입력 모듈과 출력 모듈을 포함할 수 있는데, 입력 모듈은 사용자로부터 사용자 입력을 수신한다. 사용자 입력은 키 입력, 터치 입력, 음성 입력을 비롯한 다양한 형태로 이루어질 수 있다. 이러한 사용자 입력을 받을 수 있는 입력 모듈의 예로는 전통적인 형태의 키패드나 키보드, 마우스는 물론, 사용자의 터치를 감지하는 터치 센서, 음성 신호를 입력받는 마이크, 영상 인식을 통해 제스처 등을 인식하는 카메라, 사용자 접근을 감지하는 조도 센서나 적외선 센서 중 적어도 하나를 포함하는 근접 센서, 가속도 센서나 자이로 센서 등을 통해 사용자 동작을 인식하는 모션 센서 및 그 외의 다양한 형태의 사용자 입력을 감지하거나 입력받는 다양한 형태의 입력 수단이 있으며, 본 개시의 실시예에 따른 입력 모듈은 위에 나열한 장치 중 적어도 하나를 포함할 수 있다. 여기서, 터치 센서는 디스플레이 패널에 부착되는 터치 패널이나 터치 필름을 통해 터치를 감지하는 압전식 또는 정전식 터치 센서, 광학적인 방식에 의해 터치를 감지하는 광학식 터치 센서 등으로 구현될 수 있다. 이외에도 입력 모듈은 자체적으로 사용자 입력을 감지하는 장치 대신 사용자 입력을 입력받는 외부의 입력 장치를 연결시키는 입력 인터페이스(USB 포트, PS/2 포트 등)의 형태로 구현될 수도 있다. 또 출력 모듈은 각종 정보를 출력할 수 있다. 출력 모듈은 영상을 출력하는 디스플레이, 소리를 출력하는 스피커, 진동을 발생시키는 햅틱 장치 및 그 외의 다양한 형태의 출력 수단 중 적어도 하나를 포함할 수 있다. 이외에도 출력 모듈은 상술한 개별 출력 수단을 연결시키는 포트 타입의 출력 인터페이스의 형태로 구현될 수도 있다.

일 예로, 디스플레이 형태의 출력 모듈은 텍스트, 정지 영상, 동영상을 디스플레이 할 수 있다. 디스플레이는 액정 디스플레이(LCD: Liquid Crystal Display), 발광 다이오드(LED: light emitting diode) 디스플레이, 유기 발광 다이오드(OLED: Organic Light Emitting Diode) 디스플레이, 평판 디스플레이(FPD: Flat Panel Display), 투명 디스플레이(transparent display), 곡면 디스플레이(Curved Display), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 홀로그래픽 디스플레이(holographic display), 프로젝터 및 그 외의 영상 출력 기능을 수행할 수 있는 다양한 형태의 장치 중 적어도 하나를 포함할 수 있다. 이러한 디스플레이는 입력 모듈의 터치 센서와 일체로 구성된 터치 디스플레이의 형태일 수도 있다.

통신부(220)는 다른 장치와 통신할 수 있다. 따라서, 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)는 통신부를 통해 다른 장치와 정보를 송수신할 수 있다. 예를 들어, 전자 장치(101) 및 사용자 장치(102)는 통신부를 이용해 상호 간 통신을 수행하거나, 기타 다른 장치와 통신을 수행할 수 있다.

여기서, 통신, 즉 데이터의 송수신은 유선 또는 무선으로 이루어질 수 있다. 이를 위해 통신부는 LAN(Local Area Network)를 통해 인터넷 등에 접속하는 유선 통신 모듈, 이동 통신 기지국을 거쳐 이동 통신 네트워크에 접속하여 데이터를 송수신하는 이동 통신 모듈, 와이파이(Wi-Fi) 같은 WLAN(Wireless Local Area Network) 계열의 통신 방식이나 블루투스(Bluetooth), 직비(Zigbee)와 같은 WPAN(Wireless Personal Area Network) 계열의 통신 방식을 이용하는 근거리 통신 모듈, GPS(Global Positioning System)과 같은 GNSS(Global Navigation Satellite System)을 이용하는 위성 통신 모듈 또는 이들의 조합으로 구성될 수 있다.

스토리지(230)는 각종 정보를 저장할 수 있다. 스토리지는 데이터를 임시적으로 또는 반영구적으로 저장할 수 있다. 예를 들어, 전자 장치(101)의 스토리지에는 전자 장치(101)를 구동하기 위한 운용 프로그램(OS: Operating System), 웹 사이트를 호스팅하기 위한 데이터나 점자 생성을 위한 프로그램 내지는 어플리케이션(예를 들어, 웹 어플리케이션)에 관한 데이터 등이 저장될 수 있다. 또, 스토리지는 상술한 바와 같이 모듈들을 컴퓨터 코드 형태로 저장할 수 있다.

스토리지(230)의 예로는 하드 디스크(HDD: Hard Disk Drive), SSD(Solid State Drive), 플래쉬 메모리(flash memory), 롬(ROM: Read-Only Memory), 램(RAM: Random Access Memory) 등이 있을 수 있다. 이러한 스토리지는 내장 타입 또는 탈부착 가능한 타입으로 제공될 수 있다.

프로세서(240)는 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)의 전반적인 동작을 제어한다. 이를 위해 프로세서(240)는 각종 정보의 연산 및 처리를 수행하고 전자 장치(101)의 구성요소들의 동작을 제어할 수 있다. 예를 들어, 프로세서(240)는 테스트를 관리하기 위한 프로그램 내지 어플리케이션을 실행시킬 수 있을 것이다. 프로세서(240)는 하드웨어, 소프트웨어 또는 이들의 조합에 따라 컴퓨터나 이와 유사한 장치로 구현될 수 있다. 하드웨어적으로 프로세서(240)는 전기적인 신호를 처리하여 제어 기능을 수행하는 전자 회로 형태로 구현될 수 있으며, 소프트웨어적으로는 하드웨어적인 프로세서(240)를 구동시키는 프로그램 형태로 구현될 수 있다. 한편, 이하의 설명에서 특별한 언급이 없는 경우에는 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)의 동작은 프로세서(240)의 제어에 의해 수행되는 것으로 해석될 수 있다. 즉, 상술한 테스트 관리 시스템(100)에 구현되는 모듈들이 실행되는 경우, 모듈들은 프로세서(240)가 전자 장치(101), 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)를 이하의 동작들을 수행하도록 제어하는 것으로 해석될 수 있다.

요약하면, 다양한 실시예들은 다양한 수단을 통해 구현될 수 있다. 예를 들어, 다양한 실시예들은 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다.

하드웨어에 의한 구현의 경우, 다양한 실시예들에 따른 방법은 하나 또는 그 이상의 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서, 콘트롤러, 마이크로 콘트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.

펌웨어나 소프트웨어에 의한 구현의 경우, 다양한 실시예들에 따른 방법은 이하에서 설명된 기능 또는 동작들을 수행하는 모듈, 절차 또는 함수 등의 형태로 구현될 수 있다. 예를 들어, 소프트웨어 코드는 메모리에 저장되어 프로세서에 의해 구동될 수 있다. 상기 메모리는 상기 프로세서 내부 또는 외부에 위치할 수 있으며, 이미 공지된 다양한 수단에 의해 상기 프로세서와 데이터를 주고받을 수 있다.

이하에서는, 상기와 같은 기술적 사상에 기반하여 다양한 실시예들에 대해 보다 상세히 설명한다. 이하에서 설명되는 다양한 실시예들에 대해서는 앞서 설명한 내용들이 적용될 수 있다. 예를 들어, 이하에서 설명되는 다양한 실시예들에서 정의되지 않은 동작, 기능, 용어 등은 앞서 설명한 내용들에 기반하여 수행되고 설명될 수 있다.

이하의 설명에서는 전자 장치(101)가 테스트 관리 동작을 수행함을 전제로 다양한 실시예들에 대하여 설명하며, 다양한 실시예들에 따르면, 전자 장치(101)는 테스트 관리 동작과 관련된 정보를 사용자 장치(102), 서버 장치(103) 및 테스트 장치(104)와 송수신할 수 있다.

도 3은 다양한 실시예들에 따른 테스트 관리 시스템의 동작 방법을 나타낸 흐름도이다.

다양한 실시예들에 따른 테스트 관리 방법에 따르면, 단계 301에서, 전자 장치(101)는 제1정보를 확인할 수 있다. 제1정보는, 사용자 장치(102)로부터 수신된 사용자 입력에 기반하여 확인될 수 있다. 제1정보는 테스트를 수행하기 위한 대상이 되는 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보 가운데 적어도 하나를 포함할 수 있다.

대상 장치 설정 정보는, 테스트 장치에 관한 정보를 포함할 수 있고, 테스트 장치에 설정될, 장치 관련 설정 정보를 포함할 수 있다. 예를 들어 대상 장치 설정 정보는 테스트 장치에 대응하는 운영체제의 타입에 관한 정보, 운영체제의 버전 정보, 테스트 장치의 해상도 정보 가운데 적어도 일부를 포함할 수 있다. 전자 장치(101)는 사용자 장치(102)로부터 수신된 사용자 입력에 기반하여 대상 장치 설정 정보를 확인할 수 있다.

대상 애플리케이션 설정 정보는, 테스트를 진행하기 위하여 구동될 테스트 애플리케이션에 관한 설정 정보를 포함할 수 있다. 대상 애플리케이션 정보는, 대상 애플리케이션에 관한 정보, 대상 애플리케이션을 구성하는 소스코드 또는 패키지 가운데 어느 하나를 특정하는 정보, 대상 애플리케이션의 버전 정보, 대상 애플리케이션의 리포지토리 정보, 대상 애플리케이션의 브랜치 정보 가운데 적어도 일부를 포함할 수 있다. 예를 들어, 전자 장치(101)는 사용자 장치(102)로부터 수신한 사용자 입력에 기반하여 대상 애플리케이션 설정 정보를 확인할 수 있다.

다양한 실시예들에 따르면, 단계 302에서, 전자 장치(101)는 테스트 설정 정보를 생성할 수 있다. 테스트 설정 정보는 대상 장치 설정 정보 및 대상 애플리케이션 정보를 포함할 수 있다. 테스트 설정 정보는 대상 장치 설정 정보 및 대상 애플리케이션 정보를 포함하고, 이들과 대응하는 식별 정보가 할당될 수 있다. 전자 장치(101)는 생성된 테스트 설정 정보를 저장할 수 있다.

일 실시예에 따르면, 제1정보는 세부 환경 설정 정보를 더 포함할 수 있다. 세부 환경 설정 정보는, 테스트 계정 정보, 테스트 계정의 할당에 관한 정보, 테스트에 수반되는 API(application programming interface) 정보, API 요청 및 응답에 관한 API 모킹(mocking) 정보, 테스트를 수행하기 위한 스테이징 서버(staging server)에 관한 정보 가운데 적어도 일부를 포함할 수 있다. 세부 환경 설정 정보는 테스트 장치에 적용될 계정 정보, 해당 계정의 멤버십 가입 여부에 관한 정보, 국가 정보, 지역 정보 가운데 적어도 일부를 포함할 수 있다. 전자 장치(101)는 세부 환경 설정 정보에 기반하여 테스트 애플리케이션 및/또는 테스트 장치에 세부 환경 설정 정보를 적용할 수 있고, 적용에 따른 동작 결과 정보를 테스트 장치로부터 수신할 수 있다. 전자 장치(101)는 사용자 장치(102)로부터 수신한 사용자 입력에 기반하여 세부 환경 설정 정보를 확인할 수 있다. 전자 장치(101)는 대상 장치 설정 정보, 대상 애플리케이션 정보 및 세부 환경 설정 정보에 기반하여 테스트 환경을 설정할 수 있다. 전자 장치(101)는 대상 장치 설정 정보, 대상 애플리케이션 정보 및 세부 환경 설정 정보 가운데 적어도 일부에 기반하여 테스트 설정 정보를 생성할 수 있다.

다양한 실시예들에 따르면, 단계 303에서, 전자 장치(101)는 테스트 환경 데이터를 서버 장치(103)로부터 수신할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 제1정보에 기반하여 테스트 환경 데이터를 서버 장치(103)로부터 수신할 수 있다. 예컨대, 서버 장치(103)가 대상 애플리케이션의 소스 코드 및 버전을 관리하는 서버인 경우, 전자 장치(101)는 대상 애플리케이션 정보에 기반하여, 서버 장치(103)로부터 대상 애플리케이션 정보에 대응하는 소스 코드 또는 애플리케이션 데이터를 수신할 수 있다. 예컨대, 서버 장치(103)가 테스트 장치를 관리하는 연결 서버인 경우, 전자 장치(101)는 대상 장치 설정 정보에 기반하여 서버 장치(103)로부터 대상 장치 설정 정보에 대응하는 테스트 장치에 관한 정보, 예컨대 장치 식별 정보를 확인할 수 있다.

다양한 실시예들에 따르면, 단계 304에서, 전자 장치(101)는 테스트 환경을 설정할 수 있다. 전자 장치(101)는 테스트 장치(104)에 테스트 설정 정보 및 테스트 환경 데이터 가운데 적어도 일부에 기반하여 테스트 환경을 설정할 수 있다. 전자 장치(101)는 테스트 설정 정보 및 테스트 환경 데이터 가운데 적어도 일부에 기반하여 테스트 장치(104)를 확인하고, 테스트 장치(104)에 대상 애플리케이션 정보에 기반하여 확인되는 테스트 애플리케이션에 관한 데이터를 설치하고, 세부 환경 설정 정보를 테스트 장치(104) 또는 테스트 애플리케이션에 적용할 수 있다. 전자 장치(101)는 테스트 장치(104) 및 테스트 애플리케이션을 구동할 수 있다.

다양한 실시예들에 따르면, 단계 305에서, 전자 장치(101)는 사용자 입력을 수신할 수 있다. 전자 장치(101)는 사용자 장치(102)로부터 사용자 입력을 수신할 수 있고, 이때 사용자 입력은 테스트 애플리케이션 또는 테스트 장치의 동작을 제어하기 위한 정보를 포함할 수 있다. 예를 들어, 사용자 입력은, 사용자가 테스트 장치(104)에 대한 입력을 수행하기 위한 것일 수 있다. 전자 장치(101)는 사용자 입력을 수신하고, 단계 306에서, 사용자 입력에 대응하는 정보를 테스트 장치(104)에 대한 입력으로서 전달할 수 있다. 예컨대 테스트 장치에 대한 입력은 테스트 장치(104)에 대한 터치 입력, 테스트 애플리케이션이 특정한 동작을 수행하도록 하는 입력 등을 포함할 수 있다. 테스트 애플리케이션이 지정된 동작을 수행하도록 하는 입력은, 테스트 애플리케이션이 푸시(push) 알림을 수행하는 동작을 포함할 수 있고, 사용자 입력은, 푸시 알림 동작에 대응하는 토큰 정보를 포함하는, 동작의 제어에 관한 설정 정보를 포함할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 테스트 진행 중에 테스트 장치(104)가 지정된 동작을 자동으로 수행할 수 있도록 하는 UI 자동화(automation) 정보, 애플리케이션의 지정된 페이지 또는 지정된 애플리케이션을 실행하도록 하는 애플리케이션 스킴(scheme)에 관한 정보를 제공하고, 이에 대응하는 사용자 입력에 기반하여 테스트 장치(104) 또는 테스트 애플리케이션이 대응하는 동작을 수행하도록 제어할 수 있다.

다양한 실시예들에 따르면, 단계 307에서, 전자 장치(101)는 동작 결과에 관한 정보를 테스트 장치(104)로부터 수신할 수 있다. 동작 결과에 관한 정보는 테스트 장치(104)의 출력 화면에 관한 정보를 포함할 수 있다. 테스트 장치(104는 테스트 애플리케이션 또는 테스트 장치(104)의 동작에 따라 출력할 화면의 정보를 전자 장치(101)로 제공할 수 있다. 동작 결과 정보는, 테스트 장치(104)로부터 테스트 애플리케이션으로 전달되는 요청 및 이에 따른 애플리케이션의 응답 결과를 포함할 수 있다. 동작 결과 정보는 테스트 수행에 따른 테스트 장치(104)의 리소스 정보를 포함할 수 있다.

다양한 실시예들에 따르면, 단계 308에서, 전자 장치(101)는 출력 정보를 사용자 장치(102)에 제공할 수 있다. 출력 정보는 단계 307의 동작 결과에 관한 정보를 포함할 수 있다. 전자 장치(101)는 테스트 장치(104) 또는 테스트 애플리케이션의 동작 결과에 관한 정보를 테스트 장치(104)로부터 수신하고, 동작 결과에 관한 정보에 기반하여 사용자 장치(102)로 출력 정보를 제공할 수 있다.

도 4는 다양한 실시예들에 따른 테스트 설정에 관한 식별 정보에 기반하여 테스트 환경을 제공하는 방법을 설명하기 위한 흐름도이다.

도 4를 참조하면, 다양한 실시예들에 따른 전자 장치(101)는, 단계 401에서 사용자 장치로부터 테스트 설정에 관한 식별 정보를 수신할 수 있다. 테스트 설정에 관한 식별 정보는, 테스트 설정에 관한 요청에 포함될 수 있다. 테스트 설정 정보에 테스트 설정에 관한 식별 정보가 할당될 수 있다. 전자 장치(101)는 테스트 설정에 관한 식별 정보와 테스트 정보를 매핑하여 이를 저장할 수 있다. 전자 장치(101)는 사용자 장치(102)로부터 테스트 설정에 관한 식별 정보와 대응하는 요청을 수신할 수 있고, 이러한 요청은 사용자가 테스트 환경에 대한 설정을 제공받기 위한 요청을 포함할 수 있다.

다양한 실시예들에 따르면, 단계 402에서, 전자 장치(101)는 요청에 포함된 식별 정보에 기반하여 테스트 설정 정보를 확인할 수 있다. 전자 장치(101)는 식별 정보에 기반하여 저장된 테스트 설정 정보 가운데 어느 하나를 확인할 수 있다.

다양한 실시예들에 따르면, 단계 403에서, 전자 장치(101)는 테스트 환경을 설정할 수 있다. 전자 장치(101)는 단계 402에서 확인된 테스트 설정 정보에 기반하여 테스트 환경을 구성할 수 있다. 단계 403은, 상술한 단계 304의 동작 가운데 적어도 일부를 포함할 수 있다.

다양한 실시예들에 따르면, 단계 404에서, 전자 장치(101)는 동작 결과에 관한 정보를 테스트 장치(104)로부터 수신할 수 있다. 동작 결과에 관한 정보는 테스트 장치(104)의 출력 화면에 관한 정보를 포함할 수 있다. 테스트 장치(104는 테스트 애플리케이션 또는 테스트 장치(104)의 동작에 따라 출력할 화면의 정보를 전자 장치(101)로 제공할 수 있다. 동작 결과 정보는, 테스트 장치(104)로부터 테스트 애플리케이션으로 전달되는 요청 및 이에 따른 애플리케이션의 응답 결과를 포함할 수 있다. 동작 결과 정보는 테스트 수행에 따른 테스트 장치(104)의 리소스 정보를 포함할 수 있다. 동작 결과 정보는 전자 장치(101)가 사용자 입력에 기반하여 테스트 장치(104)로 전달한, 테스트 장치(104)에 대응하는 입력에 기반한 테스트 장치(104)의 동작 결과를 포함할 수 있다. 일 실시예에 따르면, 도 5에서 후술할 URL을 통해 테스트 설정 정보를 사용자 간에 공유하는 경우, 공유하는 사용자 장치(예: 제1사용자 장치(102a))로부터 공유 받는 사용자 장치(예: 제2사용자 장치(102b)) 간에 테스트 장치(104)의 동작에 대한 입력 및 동작에 따른 출력 정보가 공유될 수 있다. 예컨대 전자 장치(101)는 제1사용자 장치(102a)로부터 수신된 입력을 중계하여, 다른 제2사용자 장치(102b) 및 테스트 장치(104)로 함께 전송하고, 테스트 장치(104)로부터 수신한 출력 정보를 제1사용자 장치(102a) 및 제2사용자 장치(102b)로 중계할 수 있다. 전자 장치(101) 또는 서버 장치(103)는 테스트 장치(104)와 사용자 장치(102) 간의 통신을 중계할 수 있다. 사용자 장치(102)는 테스트 장치(104)에 대한 입력을 전자 장치(101)에 수행함으로써, 전자 장치(101), 또는 전자 장치(101)와 연결된 서버 장치(103)를 통해 테스트 장치(104)에 대한 입력을 수행할 수 있다. 전자 장치(101) 또는 서버 장치(103)는 사용자 장치(102) 및 테스트 장치(104) 각각에 사용자 입력 및 사용자 입력에 따른 출력 정보를 중계하여 전달할 수 있다.

다양한 실시예들에 따르면, 단계 405에서, 전자 장치(101)는 출력 정보를 사용자 장치(102)에 제공할 수 있다. 출력 정보는 단계 307의 동작 결과에 관한 정보를 포함할 수 있다. 전자 장치(101)는 테스트 장치(104) 또는 테스트 애플리케이션의 동작 결과에 관한 정보를 테스트 장치(104)로부터 수신하고, 동작 결과에 관한 정보에 기반하여 사용자 장치(102)로 출력 정보를 제공할 수 있다.

도 5는 다양한 실시예들에 따른 전자 장치가 제공하는 테스트 툴을 설명하기 위한 도면이다.

도 5를 참조하면, 테스트 툴은 웹페이지 형태(예: 제1페이지(500))로 제공될 수 있다. 전자 장치(101)는 사용자 장치(102)에 제1페이지(500)를 제공할 수 있다. 제1페이지(500)는 테스트 설정에 관한 제1정보를 수신하고, 제1정보에 기반하여 테스트 설정 정보를 확인하여 테스트 환경을 구성하기 위한 페이지일 수 있다. 제1페이지(500)는 테스트 설정 정보에 기반하여 구성된 테스트 환경을 적용한 테스트 장치(104) 및 테스트 애플리케이션을 이용하여 테스트를 수행할 수 있도록 하는 페이지일 수 있다.

도 5를 참조하면, 제1페이지(500)는 테스트 설정 정보를 사용자로부터 수신하기 위한 설정 영역(510)을 포함할 수 있다. 설정 영역(510)을 통하여 전자 장치(101)는 테스트 설정 정보에 포함된 다양한 정보, 예컨대 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보를 수신할 수 있다.

도 5를 참조하면, 제1페이지(500)는 테스트 설정 정보를 표시하는 표시 영역(520)을 포함할 수 있다. 전자 장치(101)는 설정 영역(510)에서 수신된 제1정보에 기반하여 생성된 테스트 설정 정보를 표시 영역(520) 상에 표시할 수 있다.

도 5를 참조하면, 제1페이지(500)는 설정 영역(510)과 대응하는 출력 영역(530)을 포함할 수 있다. 출력 영역(530)은 출력 정보를 제공하기 위한 영역일 수 있다. 전자 장치(101)는 테스트 장치(104)의 구동 결과에 대응하는 화면 정보를 포함하는, 동작 결과 정보를 출력 영역(530) 상에 표시할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 출력 영역(530) 상에서 테스트 장치(104)에 대한 사용자 입력을 수신할 수 있다. 사용자 입력이 출력 영역(530) 상에서 테스트 장치(104)의 디스플레이 각 영역에 대응하는 일부 영역으로부터 수신되는 경우, 전자 장치(101)는 이에 대응하는 테스트 장치(104)에 대한 입력을 테스트 장치(104)에 전달할 수 있다.

도 5를 참조하면, 제1페이지(500)는 저장 아이콘(540)을 포함할 수 있고, 전자 장치(101)는 저장 아이콘(540)에 대응한 사용자 입력에 기반하여 표시 영역(520)에 표시 중인 테스트 설정 정보를 저장할 수 있다. 또한, 제1페이지(500)는 구동 아이콘(550)을 포함할 수 있고, 전자 장치(101)는 구동 아이콘(550)에 대응한 사용자 입력에 기반하여 테스트 설정 정보가 적용된 테스트 환경에서 테스트 애플리케이션이 설치된 테스트 장치(104)를 구동할 수 있다. 전자 장치(101)는 테스트 장치(104)의 구동에 대응하는 출력 결과를 출력 영역(530)에 표시할 수 있다.

도 5를 참조하면, 테스트 설정 정보는 테스트 설정에 관한 식별 정보(501)가 할당될 수 있고, 테스트 설정에 관한 식별 정보(501)와 대응하는 테스트 설정에 관한 사용자 요청은, 도 5의 예시와 같이 URL 정보(502) 형태로 제공될 수 있다. 사용자 간의 URL 정보의 교환을 통해 사용자들은 테스트 설정 정보를 공유할 수 있다. 예를 들어, 제1사용자 장치(102a)로부터 식별 정보(501)를 포함하는 URL 정보(502)를 수신한 제2사용자 장치(102a)가, URL 정보(502)를 포함하는 요청을 전자 장치(101)로 전달하면, 전자 장치(101)는, 이에 대한 응답으로, 이와 대응하는 테스트 설정 정보가(테스트 환경이) 적용된 제1페이지(500)를 제공할 수 있다.

도 6은 다양한 실시예들에 따른 대상 장치 설정 정보를 수신하기 위한 제1그래픽 기반 인터페이스를 설명하기 위한 도면이다.

도 6을 참조하면, 제1그래픽 기반 인터페이스(Graphical User Interface, GUI)(600)는 설정 영역(510)의 적어도 일부에 제공될 수 있다. 도 6의 예시에 따르면, 제1GUI(600)는 설정 영역(510)의 탭 구분을 통하여 제공될 수 있으나, 이러한 방식에 한정되는 것은 아니다.

도 6을 참조하면, 전자 장치(101)는 제1GUI(600)를 통해 사용자로부터 대상 장치 설정 정보에 관한 입력을 수신할 수 있다. 제1GUI(600)는 대상 장치, 즉, 테스트 장치(104)를 특정하기 위한 대상 장치 설정 정보를 수신하기 위한 각 영역(영역 610, 영역 602, 영역 630)을 포함할 수 있다. 전자 장치(101)는 각 영역으로부터 수신된 입력에 기반하여 테스트 장치(104)에 관한 대상 장치 설정 정보를 확인할 수 있다. 제1GUI(600)의 각 영역(610, 620, 630)은 서로 다른 영역에 대한 사용자 입력에 기반하여 제공하는 아이콘이 상이할 수 있다. 예를 들면, 영역 610에서 'IOS REAL DEVICES', 즉, 'IOS'라는 운영체제에 기반한 실제 장치를 선택하는 경우, 이에 대응한 'iPhone' 카테고리 및 'iPad' 카테고리에 관한 선택을 할 수 있는 아이콘들이 영역 620에 표시될 수 있다. 이때 실제 장치(Real device)의 경우 테스트 장치(104)는 전자 장치(104)와 유선 또는 무선 통신으로 연결되는 실물 기기일 수 있고, 'SIMULATOR' 또는 'EMULATOR'를 선택할 경우 테스트 장치(104)는 전자 장치(101) 또는 전자 장치(101)와 연결된 다른 장치의 에뮬레이팅 프로그램을 통해 구현되는 가상의 장치일 수 있다. 영역 620에서 'iPhone'을 선택하는 예시의 경우, 이와 대응하는 운영 체제 및 기기의 타입에 관한 정보를 선택할 수 있는 아이콘이 영역 630에 제공될 수 있다. 전자 장치(101)는 각 영역에서 수신한 사용자 입력에 기반하여 특정한 테스트 장치(104)에 관한 대상 장치 설정 정보를 확인할 수 있다.

도 7은 다양한 실시예들에 따른 대상 애플리케이션 정보를 수신하기 위한 제2그래픽 기반 인터페이스를 설명하기 위한 도면이다.

도 7을 참조하면, 제2그래픽 기반 인터페이스(Graphical User Interface, GUI)(700)는 설정 영역(510)의 적어도 일부에 제공될 수 있다. 도 7의 예시에 따르면, 제2GUI(700)는 설정 영역(510)의 탭 구분을 통하여 제공될 수 있으나, 이러한 방식에 한정되는 것은 아니다.

도 7을 참조하면, 전자 장치(101)는 제2GUI(700)를 통해 사용자로부터 대상 애플리케이션 정보에 관한 입력을 수신할 수 있다. 제2GUI(700)는 대상 애플리케이션 정보를 특정하기 위한 각 영역(영역 710, 영역 720, 영역 730)을 포함할 수 있다. 전자 장치(101)는 각 영역으로부터 수신된 입력에 기반하여 테스트 장치(104)에 관한 대상 장치 설정 정보를 확인할 수 있다. 제2GUI(700)의 각 영역(710, 720, 730)은 서로 다른 영역에 대한 사용자 입력에 기반하여 제공하는 아이콘, 필드, 리스트 등이 상이할 수 있다. 예를 들어, 제2GUI(700)의 각 영역을 통해 테스트의 대상이 되는 하나 이상의 후보 애플리케이션에 관한 정보(예: 영역 720), 하나 이상의 후보 애플리케이션에 대응하는 하나 이상의 리포지토리에 대한 목록(예: 영역 710), 하나 이상의 리포지토리에 대응하는 하나 이상의 브랜치 정보(예: 영역 730)가 제공될 수 있다. 예를 들어, 전자 장치(101)가 영역 710에서 아이콘 712를 선택하는 사용자 입력을 수신하는 경우, 이는 개발 단계에서 지속적 통합 및 지속적 배포를 위한 리포지토리에 접근하기 위한 입력일 수 있다. 또 다른 예로서, 영역 710에서 아이콘 711에 대한 선택은 실제 배포되어 앱스토어(App Store) 또는 플레이 스토어(Play Store)에서 서비스 중인, 애플리케이션을 테스트 애플리케이션을 선택하기 위한 입력일 수 있다. 이때 전자 장치(101)는 대상 장치 설정 정보에 기반하여 제2GUI(700)의 아이콘 가운데 적어도 일부를 활성화하거나 비활성화 할 수 있다. 예를 들어, 제1GUI(600)에서 'IOS'운영체제에 기반한 장치가 테스트 장치로 선택될 경우, 전자 장치(101)는 대상 장치 설정 정보에 기반하여 해당 운영체제에서 구동될 수 없는 'Play Store'에 대응하는 대상 애플리케이션 정보를 선택할 수 없도록 대응하는 아이콘을 비활성화 할 수 있다. 영역 710에 대응하는 입력에 기반하여 영역 720에서 대상 애플리케이션의 종류를 선택할 수 있는 하나 이상의 아이콘을 제공할 수 있다. 이때 영역 710과 영역 720의 선택 순서, 선택에 따른 다른 영역의 아이콘 배치, 아이콘 항목 등에 관한 순서는 서로 변경될 수 있다. 제2GUI(700)는 영역 710 및 영역 720에 대응한 사용자 입력에 기반하여 영역730을 제공할 수 있다. 영역 730은 영역 710 및 영역 720에 대응한 사용자 입력에 기반하여 확인되는 대상 리포지토리에 저장된 하나 이상의 소스 코드에 관한 정보를 포함할 수 있다. 하나 이상의 소스 코드는 예컨대 브랜치 단위로 표시될 수 있고, 제2GUI(700)는 어느 하나의 브랜치(731)를 선택하는 입력에 대응하여 해당 브랜치의 상세 정보(732)를 제공할 수 있고, 브랜치(731)의 정보에 기반하여 이에 대한 빌드 요청을 위한 아이콘(733) 및 이 브랜치를 선택하기 위한 아이콘(734)를 표시할 수 있다. 전자 장치(101)는 브랜치 선택을 위한 아이콘(734)에 대응하는 입력에 기반하여 선택된 브랜치(731)에 대응하는 애플리케이션 데이터를 확인하고, 이를 대상 애플리케이션 정보로서 확인할 수 있다. 전자 장치(101)는 대상 애플리케이션 정보에 기반하여 확인되는 테스트 애플리케이션을 테스트 장치에 설치할 수 있다.

도 8은 다양한 실시예들에 따른 세부 환경 설정 정보를 수신하기 위한 제3그래픽 기반 인터페이스를 설명하기 위한 도면이다.

도 8을 참조하면, 제3그래픽 기반 인터페이스(Graphical User Interface, GUI)(800)는 설정 영역(510)의 적어도 일부에 제공될 수 있다. 도 8의 예시에 따르면, 제3GUI(800)는 설정 영역(510)의 탭 구분을 통하여 제공될 수 있으나, 이러한 방식에 한정되는 것은 아니다.

도 8을 참조하면, 제3GUI(800)의 적어도 일부 영역에 세부 환경 정보에 관한 카테고리를 선택하는 영역 810이 제공될 수 있다. 세부 환경 설정 정보는 예컨대 스테이징 서버(Staging Server)에 관한 정보를 입력할 수 있는 제1아이콘(811), AB 테스트에서 계정에 대한 버전 별 그룹(group)를 지정할 수 있는 제2아이콘(812), 테스트 계정의 설정에 관한 제3아이콘(813) 및 목 데이터(mock data)의 확인 및 선택에 관한 제4아이콘(814)를 포함할 수 있으나, 이에 한정되는 것은 아니다.

예를 들면, 스테이징 서버에 관한 제1아이콘(811)을 선택 시, 제3GUI(800)는 세부 설정 영역(820) 상에 테스트 장치(104)에 설치된 테스트 애플리케이션을 이용하여 수신되는 요청 및 응답을 수행하는 스테이징 서버를 선택할 수 있는 목록 또는 아이콘을 제공할 수 있고, AB 테스트의 계정 할당에 관한 제2아이콘(812)를 선택 시 각 AB 테스트 별로 테스트 장치(104)에 대응하는 장치 식별 정보를 어떤 버전의 그룹(group)(예: A side, B side, None-side)에 할당할 것인지에 관한 선택 창(821)을 세부 설정 영역(820) 상에 제공할 수 있다. 또한 테스트 계정에 관한 세부 설정 입력을 수행할 수 있는 사용자 인터페이스, 테스트 수행에 필요한 API의 요청 및 응답에 관한 목 데이터의 리스트가 세부 설정 영역(820) 상에 표시될 수 있다. 전자 장치(101)는 테스트 장치(104)에 대응하는 장치 식별 정보에 기반하여, 테스트 장치(104)가 설정된 그룹에 대응하는 페이지를 제공할 수 있다.

전자 장치(101)는 세부 환경 설정 정보를 제3GUI(800)에 대응한 사용자 입력에 기반하여 확인할 수 있고, 이를 테스트 장치(104) 및/또는 테스트 애플리케이션에 적용하여 테스트 환경을 구성할 수 있다. 예를 들어, 테스트 계정 정보, 테스트에 대응하는 테스트 계정 할당 정보, API(Application Programming Interface) 정보, API 요청 또는 API 응답에 관한 모킹 정보, 테스트를 수행하기 위한 스테이징 서버(staging server) 정보 가운데 적어도 일부에 기반하여 전자 장치(101)는 세부 환경 설정 정보에 대응하는 서버 장치(103)로부터 세부 환경에 관한 데이터를 수신할 수 있고, 수신된 데이터를 테스트 장치(104)에 전송, 설정하거나 또는 설치할 수 있다. 또는 전자 장치(101)는 세부 환경 설정 정보에 기반하여 확인되는 서버 장치(103)와 테스트 장치(104)의 연결을 구성할 수 있다.

도 9는 다양한 실시예들에 따른 제4그래픽 기반 인터페이스를 설명하기 위한 도면이다.

도 9을 참조하면, 제4그래픽 기반 인터페이스(Graphical User Interface, GUI)(900)는 설정 영역(510)의 적어도 일부에 제공될 수 있다. 도 9의 예시에 따르면, 제4GUI(900)는 설정 영역(510)의 탭 구분을 통하여 제공될 수 있으나, 이러한 방식에 한정되는 것은 아니다.

전자 장치(101)는 제4GUI(900)을 통하여 수신한 사용자 입력에 기반하여 테스트 수행에 필요한 각종 테스트 장치(104)의 동작 및 테스트 애플리케이션의 동작을 제어할 수 있다. 예를 들어, 제4GUI(900)를 통해 전자 장치(101)는 테스트 애플리케이션의 동작을 제어하기 위한 설정 정보를 수신할 수 있다. 일 예에 따르면, 영역 910에서 푸시(push) 알림 동작을 구현하기 위한 입력 아이콘(912)을 선택하는 경우 이와 대응되는 설정 정보를 수신하기 위한 필드(920)가 제공될 수 있고, 이러한 필드(920)를 통해 수신한 푸시 알림의 설정 정보(예: 토큰에 관한 정보)를 수신하고, 이를 전송하는 경우, 전자 장치(101)는 테스트 애플리케이션의 동작을 제어하여 테스트 장치(104)로 테스트 애플리케이션에 관한 푸시 알림을 전달할 수 있다. 예컨대 전자 장치(101)는 설정 정보에 기반하여, 테스트 장치(104)와 연결된 스테이징 서버 또는 서비스 서버 등으로 설정 정보를 전송하고, 테스트 장치(104)로 푸시 알림을 전송하도록 요청 할 수 있다. 또 다른 예에서, 제4GUI(900)는 테스트 케이스 정보를 제공하는 아이콘(911)에 대한 입력에 기반하여, 기 진행되었거나 진행될 예정인 테스트 케이스들에 관한 정보를 제공할 수 있다. 이러한 테스트 케이스 정보는 전자 장치(101)가, 제4GUI(900)에 대한 입력에 기반하여, 입력에 대응하는 서버 장치(103)를 확인하고, 서버 장치(103)로부터 수신한, 테스트 케이스에 관한 테스트 환경 데이터를 제4GUI(900)를 통해 제공함으로써 사용자에게 제공될 수 있다. 또 다른 예를 들면, 전자 장치(101)는 애플리케이션 스킴(application scheme)에 관한 정보를 제공하는 아이콘(913)에 대한 사용자 입력에 기반하여 테스트 중에 사용 가능한 애플리케이션 스킴에 관한 정보를 제공할 수 있고, 사용자가 특정 애플리케이션 스킴을 선택하는 경우, 이에 대응한 애플리케이션 스킴을 현재 구동 중인 테스트 장치(104) 및 테스트 애플리케이션에 적용하여, 애플리케이션 스킴에 대응하는 출력 정보를 사용자에게 제공할 수 있다. 애플리케이션 스킴 정보는, 스킴에 대응하는 애플리케이션 설치하는 동작, 테스트 설정에 관한 식별 정보와 대응하는 애플리케이션 스킴을 호출하는 동작, 특정한 API를 호출하는 동작, 업데이트 동작 등을 수행하도록 요청하는 정보를 포함할 수 있다. 또 다른 예를 들면, 전자 장치(101)는 제4GUI(900)를 통해 UI 자동화(UI automation)에 관한 정보를 제공할 수 있고, 사용자가 선택한 UI 자동화 선택 입력에 기반하여 대응하는 자동화된 입력을 테스트 장치(104)에 전달할 수 있다. 자동화된 입력은 예를 들어, 테스트 장치(104) 및 테스트 애플리케이션 구동 후에 기기를 제어하는 동작, 권한에 관한 설정을 지정 또는 해제 하는 동작, 자동 로그인 동작, 앱 설치 및 실행 동작 등 테스트 진행 시에 필수적으로 수행되어야 하며 사용자가 일일이 입력하기 번거로운 동작 등을 포함할 수 있다. 이러한 애플리케이션 스킴 정보, UI 자동화 정보 등은 라이브러리화 되어 사용자에 의하여 제4GUI(900)를 통해 업데이트 되거나, 라이브러리에서 사용자가 선택할 수 있도록 하여 선택에 따른 해당 기능을 전자 장치(101)가 테스트 중에 제공할 수 있다. 예컨대 도 4의 단계 401에 기반하여 설정된 테스트 설정에 관한 식별 정보와, 스킴 정보 또는 UI 자동화 정보가 매핑될 수 있고, 이 경우 단계 401에 따른 요청에 기반하여 전자 장치(101)는 애플리케이션 스킴 정보 또는 UI 자동화 정보에 기반한 동작을 테스트 장치(104) 또는 테스트 애플리케이션이 수행하도록 함으로써 테스트 환경을 구성하는 것도 가능하다.

도 10은 다양한 실시예들에 따른 제5그래픽 기반 인터페이스를 설명하기 위한 도면이다.

도 10을 참조하면, 전자 장치(101)는 제5그래픽 기반 인터페이스(Graphical User Interface, GUI)(1000)를 제공할 수 있다. 전자 장치(101)는 제5GUI(1000)를 통해 사용자의 테스트 장치(104)에 대한 입력을 수신하거나, 테스트 장치(104)의 출력 정보를 표시하는 출력 영역(530)을 제공할 수 있다. 일 예로 전자 장치(101)는 제5GUI(1000)의 표시 방식을 도 5의 출력 영역(530)과 같은 표시 방식과, 도 10에 따른 도구 모음 등을 포함한 표시 방식 간에 전환하여 제5GUI(1000)를 제공할 수 있다. 예를 들어, 줌 인/줌 아웃 아이콘(1030을 통해 도 5의 출력 영역(530)과 제5GUI(1000)간의 전환이 이루어질 수 있다.

도 10을 참조하면, 제5GUI(1000)는 적어도 일부 영역에 테스트 도구 영역(1010)을 포함할 수 있다. 테스트 도구 영역(1010)은, 테스트 진행 과정에서, 테스트 툴이 제공하는 기능에 관한 하나 이상의 도구 아이콘을 포함할 수 있다. 예를 들어, 테스트 진행 중에 출력 영역(530)에 표시된 동작 결과를 캡쳐하기 위한 녹화 아이콘, 화면의 확대/축소에 관한 아이콘, 버그 리포팅을 위한 아이콘, 테스트를 종료하기 위한 아이콘 등을 포함할 수 있다. 예를 들어, 버그를 리포팅하는 경우, 버그 리포트 아이콘을 통해 사용자 요청을 수신 시, 출력 영역(530) 및 장치 도구 영역(1020) 또는 제4GUI(900) 등을 통해 수행된 테스트 동작에 관한 정보 가운데 적어도 일부가 버그 리포트 정보로서 저장되고, 버그 리포트 정보가, 버그 관리 동작에 대응하는 서버 장치(103)에 전달될 수 있다. 예컨대 버그 리포트 정보는 테스트 설정 정보, 테스트 구동에 따른 인스턴스 정보, 테스트를 진행한 사용자에 관한 정보, 사용자의 추가 입력에 기반한 버그 상세 정보 가운데 적어도 일부를 포함할 수 있다.

도 10을 참조하면, 제5GUI(1000)는 적어도 일부 영역에 테스트 장치(104)에 사용자 입력을 전달하기 위한 장치 도구 영역(1020)을 포함할 수 있다. 예를 들어, 테스트 장치(104)의 언어 설정 입력, 테스트 장치(104)의 화면 회전 입력, 테스트 장치(104)의 위치 정보 설정 입력 등, 테스트 장치(104) 내에서의 각종 동작을 위한 입력을 사용자가 수행하기 위하여 제공되는 도구에 대응하는 아이콘을 포함할 수 있다. 사용자는 출력 영역(530)을 통하여 테스트 장치(104)의 화면에 대응하는 영역에 입력을 수행하여, 전자 장치(101)가 이에 대응하는 동작을 테스트 장치(104)에 적용하는 방식과, 장치 도구 영역(1020)에 대응하는 입력 가운데 적어도 일부에 기반하여 테스트 장치(104)의 동작을 제어하는 입력을 수행할 수 있다.

도 10을 참조하면, 제5GUI(1000)는 상태 정보 영역(1040)을 표시할 수 있다. 상태 정보 영역(1040)은, 예를 들어, 테스트 장치(104)가 테스트 진행에 따라 제공하는 리소스 정보, Http 연결 정보, 테스트 장치(104)의 동작에 따른 로그 정보, 테스트 애플리케이션의 로그 정보, 테스트 애플리케이션의 설치에 관한 정보 등을 표시할 수 있다. 이러한 제5GUI(1000)의 각종 기능은 테스트의 종류, 테스트 식별 정보, 테스트 설정 자체와는 무관하게, 제공될 수 있다.

도 11은 다양한 실시예들에 따른 전자 장치가 수행하는 인스턴스 정보 생성에 관한 동작 흐름도이다.

도 11을 참조하면, 동작 S1101에서, 전자 장치(101)는 테스트 애플리케이션을 구동할 수 있다. 테스트 애플리케이션의 구동은, 제1페이지(500)에서 구동 아이콘(550)에 대응한 사용자 입력에 기반하여 테스트 설정 정보가 적용된 테스트 환경에서 테스트 애플리케이션이 설치된 테스트 장치(104)를 구동함으로써 수행될 수 있다. 전자 장치(101)는 테스트 장치(104)의 구동에 대응하는 출력 결과를 출력 영역(530)에 표시할 수 있다. 테스트 애플리케이션 구동은 테스트 장치(104)의 구동과 대응할 수 있다. 테스트 애플리케이션 또는 테스트 장치(104)의 구동은, 테스트의 실행 또는 테스트 구동 동작으로 이해될 수 있다.

다양한 실시예들에 따르면, 동작 S1102에서, 전자 장치(101)는 테스트 실행에 대응하여, 테스트에 관한 인스턴스 정보를 생성할 수 있다. 인스턴스 정보는, 사용자가 테스트 설정 정보에 기반하여 진행한 특정한 1회 또는 수회의 테스트와 대응할 수 있다. 사용자가 테스트를 수행 시 이를 하나의 인스턴스(instance)로 지칭하고, 테스트 수행에 대응하는 정보를 인스턴스 정보로 이해할 수 있다. 일 실시예에 따르면, 인스턴스 정보는, 해당 인스턴스에 대응하는 테스트가 수행된 테스트 환경에 관한 테스트 설정 정보, 테스트를 수행한 사용자 정보를 포함할 수 있다. 인스턴스 정보에는 인스턴스에 관한 식별 정보가 할당될 수 있다.

동작 S1103에서, 전자 장치(101)는 테스트 진행 경과에 따라 사용자가 수행한 입력에 관한 정보를 확인할 수 있다. 사용자 입력은, 사용자가 테스트 수행에 관련하여 제4GUI(900), 제5GUI(1000), 출력 영역(530) 등을 통해 입력한, 테스트 장치(104) 또는 테스트 애플리케이션에 대한 입력을 포함할 수 있다.

전자 장치(101)는 동작 S1104에서, 확인된 사용자 입력에 관한 정보를 인스턴스 정보에 매핑할 수 있다. 전자 장치(101)는 테스트 설정 정보에 기반하여, 테스트 설정 정보와 대응하는 하나 이상의 인스턴스 정보를 확인할 수 있고, 또는 인스턴스 정보에 기반하여 해당 인스턴스의 테스트 환경에 관한 테스트 설정 정보를 확인할 수도 있다. 예를 들어, 어떤 제1사용자 장치(102a)에서 제1테스트 설정 정보에 기반하여 수행된 제1테스트 인스턴스에 관한 정보를 제2사용자 장치(102b)에서 요청할 수 있고, 전자 장치(101)는 요청에 기반하여, 제1테스트 설정 정보를 적용한 테스트 환경을 제2사용자 장치(102b)에 제공할 수 있고, 해당 제1인스턴스 따른 사용자 입력 정보를, 제2사용자 장치(102b)에 제공하여, 제2사용자 장치(102b)에서 수행하는 제2테스트 인스턴스에서도 제1테스트 인스턴스와 동일한 사용자 입력을 반복할 수 있다. 이와 같이 사용자 간에 테스트 환경뿐만 아니라 테스트 진행에 따른 동작에 관한 정보를 공유할 수 있으므로 테스트 관련된 사용자 간의 의사소통의 편의성, 테스트 작업의 효율성 등에 관한 기술적 효과를 기대할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 사용자가 제5GUI(1000)를 통해 캡쳐한 테스트 출력 정보의 이미지 또는 동영상에 관한 정보를 인스턴스 정보에 매핑할 수 있다.

한편, 본 명세서와 도면에는 본 개시의 바람직한 실시 예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 개시의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 개시의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예 외에도 본 개시의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.

상술한 실시 예들에 따른 전자 장치 또는 단말은, 프로세서, 프로그램 데이터를 저장하고 실행하는 메모리, 디스크 드라이브와 같은 영구 저장부(permanent storage), 외부 장치와 통신하는 통신 포트, 터치 패널, 키(key), 버튼 등과 같은 사용자 인터페이스 장치 등을 포함할 수 있다. 소프트웨어 모듈 또는 알고리즘으로 구현되는 방법들은 프로세서 상에서 실행 가능한 컴퓨터가 읽을 수 있는 코드들 또는 프로그램 명령어들로서 컴퓨터가 읽을 수 있는 기록 매체 상에 저장될 수 있다. 여기서 컴퓨터가 읽을 수 있는 기록 매체로 마그네틱 저장 매체(예컨대, ROM(read-only memory), RAM(random-Access memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD; Digital Versatile Disc)) 등이 있다. 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 매체는 컴퓨터에 의해 판독가능하며, 메모리에 저장되고, 프로세서에서 실행될 수 있다.

본 실시 예는 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 실시 예는 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩 업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있는 것과 유사하게, 본 실시 예는 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler), 파이썬(Python) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 실시 예는 전자적인 환경 설정, 신호 처리 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. “매커니즘”, “요소”, “수단”, “구성”과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상술한 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.

상술한 실시 예들은 일 예시일 뿐 후술하는 청구항들의 범위 내에서 다른 실시 예들이 구현될 수 있다.

Claims (20)

1. 전자 장치에서 애플리케이션 테스트 관리 방법에 있어서,
   설정 영역을 통해서 수신되는 사용자의 입력을 기반으로 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보를 포함하는 제1정보를 확인하는 단계;
   상기 제1정보에 기반하여 생성된 테스트 설정 정보를 확인하는 단계;
   상기 테스트 설정 정보를 기반으로 확인된 테스트 장치 및 테스트 애플리케이션을 사용하여 상기 테스트 애플리케이션의 구동에 대응하는 출력 정보를 제공하는 단계;
   상기 테스트 애플리케이션의 구동에 대응하여, 상기 테스트 설정 정보에 대응하는 테스트에 관한 인스턴스(instance) 정보를 생성하는 단계;
   상기 테스트의 수행과 관련된 사용자 입력에 관한 정보를 확인하는 단계;
   상기 사용자 입력에 관한 정보를 상기 인스턴스 정보에 매핑하는 단계; 및
   사용자 장치에서의 상기 인스턴스 정보에 관한 요청에 기반하여, 상기 테스트 설정 정보를 적용한 테스트 환경 및 상기 사용자 입력에 관한 정보를 상기 사용자 장치에 제공하는 단계를 포함하는,
   테스트 관리 방법.
   
2. 제1항에 있어서,
   상기 대상 장치 설정 정보를 기반으로 확인된 상기 테스트 장치에 상기 대상 애플리케이션 설정 정보를 기반으로 확인된 상기 테스트 애플리케이션이 설치되는, 테스트 관리 방법.
3. 제1항에 있어서,
   상기 테스트 관리 방법은,
   상기 대상 장치 설정 정보에 기반하여 확인되는 상기 테스트 장치에 관한 정보 및 상기 대상 애플리케이션 설정 정보에 기반하여 확인되는 테스트 애플리케이션에 관한 정보를 제공하는 단계를 더 포함하는, 테스트 관리 방법.
4. 제1항에 있어서,
   상기 테스트 설정 정보에 대응하는 테스트 설정에 관한 식별 정보가 할당되며,
   상기 테스트 관리 방법은,
   상기 식별 정보에 대응하는 요청이 수신되면, 상기 테스트 장치 및 테스트 애플리케이션을 사용한 테스트 환경을 제공하는 단계를 더 포함하는, 테스트 관리 방법.
5. 제1항에 있어서,
   상기 테스트 관리 방법은,
   테스트 설정에 관한 식별 정보를 확인하는 단계;
   상기 식별 정보에 대응하는 테스트 설정 정보를 확인하는 단계; 및
   상기 테스트 설정 정보에 기반하여 확인된 테스트 장치 및 테스트 애플리케이션을 사용하여 상기 출력 정보를 제공하는 단계를 더 포함하는, 테스트 관리 방법.
6. 제1항에 있어서,
   상기 대상 장치 설정 정보는,
   상기 테스트 장치에 대응하는 운영체제(Operation System; OS)의 타입 정보, 상기 운영체제의 버전 정보 및 상기 테스트 장치에 대응하는 해상도 정보 가운데 적어도 하나를 포함하는, 테스트 관리 방법.
7. 제1항에 있어서,
   상기 제1정보를 확인하는 단계는,
   상기 사용자로부터 상기 대상 장치 설정 정보를 수신하기 위하여, 상기 설정 영역을 통해 제1그래픽 기반 인터페이스(Graphical User Interface; GUI)를 제공하는 단계; 및
   상기 제1그래픽 기반 인터페이스를 통해 수신한 사용자 입력에 기반하여 상기 대상 장치 설정 정보를 수신하는 단계를 포함하는, 테스트 관리 방법.
8. 제1항에 있어서,
   상기 대상 애플리케이션 설정 정보는,
   대상 애플리케이션에 관한 정보, 상기 대상 애플리케이션에 대응하는 대상 리포지토리 정보 및 상기 대상 리포지토리 정보에 대응하는 적어도 하나의 대상 브랜치 정보 가운데 적어도 하나를 포함하는, 테스트 관리 방법.
9. 제8항에 있어서,
   상기 제1정보를 확인하는 단계는,
   상기 사용자로부터 상기 대상 애플리케이션 설정 정보를 수신하기 위하여, 상기 설정 영역을 통해 제2그래픽 기반 인터페이스를 제공하는 단계;
   상기 제2그래픽 기반 인터페이스를 통해 테스트의 대상이 되는 하나 이상의 후보 애플리케이션에 관한 정보, 상기 하나 이상의 후보 애플리케이션에 대응하는 하나 이상의 리포지토리에 대한 목록, 상기 하나 이상의 리포지토리에 대응하는 하나 이상의 브랜치 정보를 제공하는 단계; 및
   상기 제2그래픽 기반 인터페이스를 통해 수신한 사용자 입력에 기반하여 상기 대상 애플리케이션 설정 정보를 확인하는 단계를 포함하는, 테스트 관리 방법.
10. 제1항에 있어서,
    상기 제1정보는 세부 환경 설정 정보를 더 포함하고,
    상기 제1정보를 확인하는 단계는,
    상기 사용자로부터 세부 환경 설정 정보를 수신하기 위하여, 상기 설정 영역을 통해 제3그래픽 기반 인터페이스를 제공하는 단계;
    상기 제3그래픽 기반 인터페이스를 통해 수신한 사용자 입력에 기반하여 상기 세부 환경 설정 정보를 수신하는 단계를 포함하는, 테스트 관리 방법.
11. 제10항에 있어서,
    상기 세부 환경 설정 정보는,
    테스트 계정 정보, 테스트에 대응하는 테스트 계정 할당 정보, API(Application Programming Interface) 정보, API 요청 또는 API 응답에 관한 모킹 정보, 테스트를 수행하기 위한 스테이징 서버(staging server) 정보 가운데 적어도 일부를 포함하는, 테스트 관리 방법.
12. 제1항에 있어서,
    상기 제1정보는,
    상기 사용자로부터 상기 설정 영역을 통해 제공되는 제4그래픽 기반 인터페이스를 통해 수신한, 상기 테스트에 관한 UI 자동화(User Interface automation) 정보 및 애플리케이션 스킴(application scheme) 정보 가운데 적어도 하나를 포함하고,
    상기 출력 정보를 제공하는 단계는,
    상기 UI 자동화 정보 및 상기 애플리케이션 스킴 정보 가운데 적어도 하나에 기반하여 상기 테스트 애플리케이션의 동작을 제어하는 단계를 더 포함하는, 테스트 관리 방법.
13. 제1항에 있어서,
    상기 테스트 관리 방법은,
    상기 테스트 애플리케이션의 구동 중에 상기 테스트 애플리케이션의 동작을 제어하기 위한 설정 정보를 더 수신하는 단계; 및
    상기 애플리케이션의 동작을 제어하기 위한 설정 정보에 기반하는 테스트 애플리케이션의 동작을 요청하는 사용자 입력에 기반하여 상기 테스트 애플리케이션의 동작에 대응하는 출력 정보를 제공하는 단계를 더 포함하는, 테스트 관리 방법.
    
14. 제13항에 있어서,
    상기 테스트 애플리케이션의 동작은, 푸시(push) 알림 동작을 포함하고, 상기 애플리케이션의 동작을 제어하기 위한 설정 정보는, 상기 푸시 알림 동작에 대응하는 토큰(token) 정보를 포함하는, 테스트 관리 방법.
    
15. 제1항에 있어서,
    상기 테스트 장치를 실행하는 단계를 더 포함하고,
    상기 테스트 장치를 실행하는 단계는
    상기 대상 장치 설정 정보에 기반하여, 상기 전자 장치와 연결되는 테스트 장치를 확인하는 단계;
    상기 대상 애플리케이션 설정 정보에 기반하여 확인되는 상기 테스트 애플리케이션에 관련된 데이터를 빌드(build) 및/또는 상기 테스트 장치에 설치하는 단계; 및
    상기 테스트 장치의 구동에 따른 출력 정보를 획득하는 단계를 포함하는, 테스트 관리 방법.
    
16. 제1항에 있어서,
    상기 출력 정보를 제공하는 단계는,
    상기 설정 영역과 대응하는 출력 영역을 포함하는 제5그래픽 기반 인터페이스를 제공하는 단계;
    상기 제5그래픽 기반 인터페이스를 통해 상기 테스트의 수행에 관한 사용자 입력을 수신하는 단계; 및
    상기 사용자 입력에 기반하여 상기 테스트 장치에 대한 입력을 수행하는 단계; 및
    상기 테스트 장치에 대한 입력에 대응하는 상기 테스트 장치의 동작 결과에 관한 정보를 포함하는 출력 정보를 상기 출력 영역에 표시하는 단계를 포함하는, 테스트 관리 방법.
17. 삭제
18. 제1항에 있어서,
    버그 리포트(bug report)에 관한 사용자 요청 수신하는 단계; 및
    상기 사용자 요청에 기반하여, 상기 테스트 설정 정보, 상기 인스턴스 정보, 상기 테스트를 수행한 사용자 정보, 사용자의 추가 입력에 기반하여 수신한 버그 상세 정보 가운데 적어도 일부를 포함하는 버그 리포트 정보 저장하는 단계를 더 포함하는, 테스트 관리 방법.
19. 전자 장치에 있어서,
    통신부; 및
    프로세서를 포함하고,
    상기 프로세서는,
    설정 영역을 통해서 수신되는 사용자의 입력을 기반으로 대상 장치 설정 정보 및 대상 애플리케이션 설정 정보를 포함하는 제1정보를 확인하고,
    상기 제1정보에 기반하여 생성된 테스트 설정 정보를 확인하고,
    상기 테스트 설정 정보를 기반으로 확인된 테스트 장치 및 테스트 애플리케이션을 사용하여 상기 테스트 애플리케이션의 구동에 대응하는 출력 정보를 제공하고,
    상기 테스트 애플리케이션의 구동에 대응하여, 상기 테스트 설정 정보에 대응하는 테스트에 관한 인스턴스 정보를 생성하고,
    상기 테스트의 수행과 관련된 사용자 입력에 관한 정보를 확인하고,
    상기 사용자 입력에 관한 정보를 상기 인스턴스 정보에 매핑하고, 및
    사용자 장치에서의 상기 인스턴스 정보에 관한 요청에 기반하여, 상기 테스트 설정 정보를 적용한 테스트 환경 및 상기 사용자 입력에 관한 정보를 상기 사용자 장치에 제공하도록 설정된, 전자 장치.
    
20. 제1항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 비일시적 기록매체.

Images