KR102618417B1

KR102618417B1 - 정보를 제공하는 전자 장치의 동작 방법 및 이를 지원하는 전자 장치

Info

Publication number: KR102618417B1
Application number: KR1020230060449A
Authority: KR
Inventors: 제무 잉
Original assignee: 쿠팡 주식회사
Priority date: 2023-05-10
Filing date: 2023-05-10
Publication date: 2023-12-28

Abstract

본 개시에 따르면, 전자 장치가 정보를 제공하는 방법에 있어서, 상기 전자 장치와 관련된 서비스 상의 복수의 사용자들로부터 획득된 요청 정보의 처리에 기반하여 상기 서비스에 대한 코드 커버리지를 분석하는 코드 커버리지 툴(code coverage tool) 및 상기 서비스에 대한 코드 커버리지 분석을 모의로 테스트(test) 하는 모의 테스트 툴을 설정하는 단계; 상기 코드 커버리지 툴에 기반하여 상기 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보 및 상기 모의 테스트 툴에 기반하여 상기 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 테스트 결과 정보를 획득하는 단계; 및 상기 코드 커버리지 분석 결과 정보 및 상기 테스트 결과 정보를 비교한 비교 정보를 제공하는 단계를 포함하는 방법이 개시된다.

Description

정보를 제공하는 전자 장치의 동작 방법 및 이를 지원하는 전자 장치{OPERATING METHOD FOR ELECTRONIC APPARATUS FOR PROVIDING INFORMATION AND ELECTRONIC APPARATUS SUPPORTING THEREOF}

본 발명은 정보를 제공하는 방법 및 장치에 관한 것으로서, 더욱 상세하게는 코드 커버리지 툴에 따른 코드 커버리지 분석 결과와 모의 테스트 툴에 따른 테스트 결과를 비교한 비교 정보를 제공하는 방법 및 이의 전자 장치에 관한 것이다.

전자기술의 발달에 따라 전자상거래는 쇼핑의 한 분야로 자리잡았다. 고객은 직접 쇼핑몰이나 시장에 가지 않고도 온라인 상에서 물품을 구매할 수 있으며, 온라인 상에서 구매한 물품은 고객이 요청한 배송지로 배송된다.

전자상거래의 경우 상품에 대한 자세하고 정확한 정보의 제공이 서비스 만족도에 상당한 영향을 미치기 때문에 보다 자세하고 정확한 정보를 제공하기 위한 다양한 방안에 대한 논의가 이루어지고 있다.

관련하여, KR101756594B1 건 또는 KR101500849B1 건 등의 선행문헌들을 참조할 수 있다.

본 발명의 방법에 따르면, 전자 장치가 코드 커버리지 툴에 따른 코드 커버리지 분석 결과와 모의 테스트 툴에 따른 테스트 결과를 비교한 비교 정보를 제공할 수 있다.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

다양한 실시예들은, 정보 제공을 위한 전자 장치의 동작 방법 및 이를 지원하는 전자 장치를 제공할 수 있다.

다양한 실시예들에 따른 전자 장치가 정보를 제공하는 방법에 있어서, 상기 전자 장치와 관련된 서비스 상의 복수의 사용자들로부터 획득된 요청 정보의 처리에 기반하여 상기 서비스에 대한 코드 커버리지를 분석하는 코드 커버리지 툴(code coverage tool) 및 상기 서비스에 대한 코드 커버리지 분석을 모의로 테스트(test) 하는 모의 테스트 툴을 설정하는 단계; 상기 코드 커버리지 툴에 기반하여 상기 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보 및 상기 모의 테스트 툴에 기반하여 상기 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 테스트 결과 정보를 획득하는 단계; 및 상기 코드 커버리지 분석 결과 정보 및 상기 테스트 결과 정보를 비교한 비교 정보를 제공하는 단계를 포함할 수 있다.

예시적 실시예에서, 상기 코드 커버리지 분석 결과 정보는, 상기 서비스 상의 페이지를 구현하는 소스 코드에서 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들에 대한 정보, 및 상기 소스 코드에서 사용자에 의한 이용 이력이 확인되지 않는 제2 코드 라인들에 대한 정보를 포함할 수 있다.

예시적 실시예에서, 상기 코드 커버리지 분석 결과 정보는, 상기 제1 코드 라인들을 위한 제1 식별 정보 및 상기 제2 코드 라인들을 위한 제2 식별 정보를 포함하고, 상기 제1 식별 정보 및 상기 제2 식별 정보는 상이한 색상에 기반하여 식별될 수 있다.

예시적 실시예에서, 상기 코드 커버리지 분석 결과 정보는, 상기 소스 코드 중에서 상기 제1 코드 라인들의 비율에 대한 정보를 포함할 수 있다.

예시적 실시예에서, 상기 코드 커버리지 분석 결과 정보를 획득하는 단계는, 상기 서비스를 위한 복수의 API(Application Programming Interface) 도메인들에 포함된 각 API 도메인을 확인하는 단계; 및 상기 각 API 도메인에 대응하는 상기 서비스 상의 하나 이상의 페이지에 대한 상기 코드 커버리지 툴의 실행에 기반하여, 상기 각 API 도메인에 대응하는 각 코드 커버리지 분석 결과 정보를 획득하는 단계를 포함할 수 있다.

예시적 실시예에서, 상기 정보 제공 방법은, 상기 복수의 API 도메인들 중에서 제1 API 도메인을 선택하는 입력을 획득하는 단계; 및 상기 입력에 대응하여, 상기 제1 API 도메인에 대응하는 제1 코드 커버리지 분석 결과 정보를 제공하는 단계를 더 포함하고, 상기 제1 코드 커버리지 분석 결과 정보는, 상기 제1 API 도메인에 대응하는 상기 서비스 상의 개별 페이지에 대한 개별 코드 커버리지 분석 결과를 포함할 수 있다.

예시적 실시예에서, 상기 코드 커버리지 툴은 일정한 주기로 실행될 수 있다.

예시적 실시예에서, 상기 모의 테스트 툴은, 소스 코드에서 메소드(method)를 설정하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제1 모의 테스트 툴에 대응할 수 있다.

예시적 실시예에서, 상기 모의 테스트 툴은, API 도메인을 위한 요청 정보의 입력 및 응답 정보의 출력을 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제2 모의 테스트 툴에 대응할 수 있다.

예시적 실시예에서, 상기 모의 테스트 툴은, UI(User Interface)를 위한 정보 처리를 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제3 모의 테스트 툴에 대응할 수 있다.

예시적 실시예에서, 상기 비교 정보는, 상기 서비스 상의 페이지를 구현하는 소스 코드 중에서 상기 코드 커버리지 분석 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석된 코드 라인들의 제1 비율과 상기 소스 코드 중에서 상기 테스트 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 판단된 코드 라인들의 제2 비율을 비교한 정보를 포함할 수 있다.

예시적 실시예에서, 상기 비교 정보는, 상기 서비스 상의 페이지를 구현하는 소스 코드 중에서 상기 코드 커버리지 툴에 의한 코드 커버리지 분석 결과와 상기 모의 테스트 툴에 의한 테스트 결과가 상이한 것으로 확인된 일부의 코드 라인들에 대한 정보를 포함할 수 있다.

예시적 실시예에서, 상기 일부의 코드 라인들은, 상기 코드 커버리지 툴에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석되면서 상기 모의 테스트 툴에 따라 사용자에 의한 이용 이력이 확인되지 않는 것으로 판단된 코드 라인을 포함할 수 있다.

예시적 실시예에서, 상기 정보 제공 방법은, 상기 일부의 코드 라인들에 대한 정보에 기반하여 상기 모의 테스트 툴을 업데이트 하기 위한 툴 업데이트 정보를 획득하는 단계; 및 상기 툴 업데이트 정보에 기반하여 업데이트 된 모의 테스트 툴을 확인하는 단계를 더 포함할 수 있다.

예시적 실시예에서, 상기 정보 제공 방법은, 상기 업데이트 된 모의 테스트 툴에 기반하여 상기 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 모의 테스트 업데이트 결과 정보를 제공하는 단계를 더 포함할 수 있다.

예시적 실시예에서, 상기 정보 제공 방법은, 상기 코드 커버리지 분석 결과 정보 및 상기 모의 테스트 업데이트 결과 정보를 비교한 비교 정보에 기반하여, 상기 업데이트 된 모의 테스트 툴에 대한 피드백 정보를 제공하는 단계를 더 포함할 수 있다.

다양한 실시예들에 따른 정보를 제공하는 전자 장치에 있어서, 프로세서(processor); 및 하나 이상의 인스트럭션(instruction)을 저장하는 하나 이상의 메모리(memory)를 포함하고, 상기 하나 이상의 인스트럭션은, 실행 시에, 상기 프로세서가: 상기 전자 장치와 관련된 서비스 상의 복수의 사용자들로부터 획득된 요청 정보의 처리에 기반하여 상기 서비스에 대한 코드 커버리지를 분석하는 코드 커버리지 툴(code coverage tool) 및 상기 서비스에 대한 코드 커버리지 분석을 모의로 테스트(test) 하는 모의 테스트 툴을 설정하는 단계; 상기 코드 커버리지 툴에 기반하여 상기 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보 및 상기 모의 테스트 툴에 기반하여 상기 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 테스트 결과 정보를 획득하는 단계; 및 상기 코드 커버리지 분석 결과 정보 및 상기 테스트 결과 정보를 비교한 비교 정보를 제공하는 단계를 수행하도록 상기 프로세서를 제어할 수 있다.

상술한 본 개시의 다양한 실시예들은 본 개시의 바람직한 실시예들 중 일부에 불과하며, 본 개시의 다양한 실시예들의 기술적 특징들이 반영된 여러 가지 실시예들이 당해 기술분야의 통상적인 지식을 가진 자에 의해 이하 상술할 상세한 설명을 기반으로 도출되고 이해될 수 있다.

본 발명은 전자 장치가 코드 커버리지 툴에 따른 코드 커버리지 분석 결과와 모의 테스트 툴에 따른 테스트 결과를 비교한 비교 정보를 제공하는 방법을 제시하여, 코드 커버리지를 위한 모의 테스트를 수행하는 모의 테스트 툴의 정확성을 높일 수 있는 측면에서 기술적인 효과를 갖는다.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

도 1은 다양한 실시예들에 따른 정보 제공을 위한 전자 장치의 동작 방법이 구현될 수 있는 정보 제공 시스템을 설명하기 위한 도면이다.
도 2는 다양한 실시예들에 따른 서버 디바이스(100) 및 사용자 디바이스(200)의 구성을 도시한 도면이다.
도 3은 다양한 실시예들에 따른 정보 제공을 위한 서버 디바이스(100)의 동작 방법을 도시한 도면이다.
도 4는 서버 디바이스(100)가 업데이트 된 모의 테스트 툴에 기반하여 서비스 상의 페이지에 대한 코드 커버리지 분석을 모의로 테스트 한 모의 테스트 업데이트 결과 정보를 제공하는 동작 방법을 도시한 도면이다.
도 5는 코드 커버리지 툴 및 모의 테스트 툴에 기반하여 코드 커버리지 분석 결과 정보 및 테스트 결과 정보에 대한 비교 정보가 획득되는 블록도를 도시한 도면이다.
도 6은 다양한 실시예들에 따른 사용자 디바이스(200)가 서비스 상의 개별 페이지에 대응하는 코드 커버리지 분석 결과 정보를 출력하는 일 예시를 도시한 도면이다.
도 7은 다양한 실시예들에 따른 사용자 디바이스(200)가 API 도메인에 대응하는 코드 커버리지 분석 결과 정보를 출력하는 일 예시를 도시한 도면이다.
도 8 내지 도 9는 다양한 실시예들에 따른 사용자 디바이스(200)가 코드 커버리지 분석 결과 정보와 테스트 결과 정보를 비교한 비교 정보를 출력하는 일 예시를 도시한 도면이다.

이하의 실시예들은 다양한 실시예들의 구성요소들과 특징들을 소정 형태로 결합한 것들이다. 각 구성요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려될 수 있다. 각 구성요소 또는 특징은 다른 구성요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성요소들 및 특징들을 결합하여 다양한 실시예들을 구성할 수도 있다. 다양한 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다.

도면에 대한 설명에서, 다양한 실시예들의 요지를 흐릴 수 있는 절차 또는 단계 등은 기술하지 않았으며, 당해 기술분야에서 통상의 지식을 가진 자의 수준에서 이해할 수 있을 정도의 절차 또는 단계는 또한 기술하지 아니하였다.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함(comprising 또는 including)"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "...부", "...기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다. 또한, "일(a 또는 an)", "하나(one)", "그(the)" 및 유사 관련어는 다양한 실시예들을 기술하는 문맥에 있어서(특히, 이하의 청구항의 문맥에서) 본 명세서에 달리 지시되거나 문맥에 의해 분명하게 반박되지 않는 한, 단수 및 복수 모두를 포함하는 의미로 사용될 수 있다.

이하, 다양한 실시예들에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 다양한 실시예들의 예시적인 실시형태를 설명하고자 하는 것이며, 유일한 실시형태를 나타내고자 하는 것이 아니다.

또한, 다양한 실시예들에서 사용되는 특정(特定) 용어들은 다양한 실시예들의 이해를 돕기 위해서 제공된 것이며, 이러한 특정 용어의 사용은 다양한 실시예들의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.

도 1은 다양한 실시예들에 따른 정보 제공을 위한 전자 장치의 동작 방법이 구현될 수 있는 정보 제공 시스템을 설명하기 위한 도면이다.

도 1을 참조하면, 다양한 실시예들에 따른 정보 제공 시스템은 다양한 종류의 전자 장치들에 구현될 수 있다. 예를 들어, 정보 제공 시스템은 서버 디바이스(100) 및 사용자 디바이스(200)에 구현될 수 있다. 달리 말해, 서버 디바이스(100) 및 사용자 디바이스(200)는 각각의 장치에 구현된 정보 제공 시스템을 기반으로, 본 개시의 다양한 실시예들에 따른 동작을 수행할 수 있다. 일 예로, 본 개시에 따른 다양한 실시예들에서 서버 디바이스(100)는 코드 커버리지 툴에 따른 코드 커버리지 분석 결과와 모의 테스트 툴에 따른 테스트 결과를 비교한 비교 정보를 관리자에 대응하는 사용자 디바이스(200)로 제공할 수 있다. 한편, 다양한 실시예들에 따른 정보 제공 시스템은, 상기 도 1에 도시된 바에 국한되지 않고, 더 다양한 전자 장치와 서버들에 구현될 수도 있을 것이다.

다양한 실시예들에 따른 서버 디바이스(100)는, 복수 개의 사용자 디바이스(200)들과 무선 및 유선 통신을 수행하며, 대단위의 저장 용량을 갖는 스토리지를 포함하는 장치일 수 있다. 예를 들어, 서버 디바이스(100)는 복수 개의 사용자 디바이스(200)들과 연동되는 클라우드 디바이스(Cloud device)일 수 있다.

다양한 실시예들에 따른 사용자 디바이스(200)는, 데스크탑 피시, 태블릿 피시, 모바일 단말 등의 개인 사용자에 의해 이용될 수 있는 장치일 수 있다. 이외에도 유사한 기능을 수행하는 다른 전자 장치들이 사용자 디바이스(200)로 이용될 수 있다.

다양한 실시예들에 따른 정보 제공 시스템은 동작을 위한 다양한 모듈들을 포함할 수 있다. 정보 제공 시스템에 포함된 모듈들은 정보 제공 시스템이 구현되는(또는, 물리적 장치에 포함되는) 물리적 장치(예: 서버 디바이스(100) 및 사용자 디바이스(200))가 지정된 동작을 수행할 수 있도록 구현된 컴퓨터 코드 내지는 하나 이상의 인스트럭션 (instruction) 일 수 있다. 다시 말해, 정보 제공 시스템이 구현되는 물리적 장치는 복수 개의 모듈들을 컴퓨터 코드 형태로 메모리에 저장하고, 메모리에 저장된 복수 개의 모듈들이 실행되는 경우 복수 개의 모듈들은 물리적 장치가 복수 개의 모듈들에 대응하는 지정된 동작들을 수행하도록 할 수 있다.

도 2는 다양한 실시예들에 따른 서버 디바이스(100) 및 사용자 디바이스(200)의 구성을 도시한 도면이다.

도 2를 참조하면, 서버 디바이스(100) 및 사용자 디바이스(200)는 입/출력부(210), 트랜시버(또는, 통신부)(220), 스토리지(230) 및 프로세서(240)를 포함할 수 있다.

입/출력부(210)는 사용자 입력을 받거나 또는 사용자에게 정보를 출력하는 각종 인터페이스나 연결 포트 등일 수 있다. 입/출력부(210)는 입력 모듈과 출력 모듈을 포함할 수 있는데, 입력 모듈은 사용자로부터 사용자 입력을 수신한다. 사용자 입력은 키 입력, 터치 입력, 음성 입력을 비롯한 다양한 형태로 이루어질 수 있다. 이러한 사용자 입력을 받을 수 있는 입력 모듈의 예로는 전통적인 형태의 키패드나 키보드, 마우스는 물론, 사용자의 터치를 감지하는 터치 센서, 음성 신호를 입력받는 마이크, 영상 인식을 통해 제스처 등을 인식하는 카메라, 사용자 접근을 감지하는 조도 센서나 적외선 센서 중 적어도 하나를 포함하는 근접 센서, 가속도 센서나 자이로 센서 등을 통해 사용자 동작을 인식하는 모션 센서 및 그 외의 다양한 형태의 사용자 입력을 감지하거나 입력받는 다양한 형태의 입력 수단이 있으며, 본 개시의 실시예에 따른 입력 모듈은 위에 나열한 장치 중 적어도 하나를 포함할 수 있다. 여기서, 터치 센서는 디스플레이 패널에 부착되는 터치 패널이나 터치 필름을 통해 터치를 감지하는 압전식 또는 정전식 터치 센서, 광학적인 방식에 의해 터치를 감지하는 광학식 터치 센서 등으로 구현될 수 있다. 이외에도 입력 모듈은 자체적으로 사용자 입력을 감지하는 장치 대신 사용자 입력을 입력받는 외부의 입력 장치를 연결시키는 입력 인터페이스(USB 포트, PS/2 포트 등)의 형태로 구현될 수도 있다. 또 출력 모듈은 각종 정보를 출력할 수 있다. 출력 모듈은 영상을 출력하는 디스플레이, 소리를 출력하는 스피커, 진동을 발생시키는 햅틱 장치 및 그 외의 다양한 형태의 출력 수단 중 적어도 하나를 포함할 수 있다. 이외에도 출력 모듈은 상술한 개별 출력 수단을 연결시키는 포트 타입의 출력 인터페이스의 형태로 구현될 수도 있다.

일 예로, 디스플레이 형태의 출력 모듈은 텍스트, 정지 영상, 동영상을 디스플레이 할 수 있다. 디스플레이는 액정 디스플레이(LCD: Liquid Crystal Display), 발광 다이오드(LED: light emitting diode) 디스플레이, 유기 발광 다이오드(OLED: Organic Light Emitting Diode) 디스플레이, 평판 디스플레이(FPD: Flat Panel Display), 투명 디스플레이(transparent display), 곡면 디스플레이(Curved Display), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 홀로그래픽 디스플레이(holographic display), 프로젝터 및 그 외의 영상 출력 기능을 수행할 수 있는 다양한 형태의 장치 중 적어도 하나를 포함할 수 있다. 이러한 디스플레이는 입력 모듈의 터치 센서와 일체로 구성된 터치 디스플레이의 형태일 수도 있다.

트랜시버(220)는 다른 장치와 통신할 수 있다. 따라서, 서버 디바이스(100) 및 사용자 디바이스(200)는 트랜시버(220)를 통해 다른 장치와 정보를 송수신할 수 있다. 예를 들어, 서버 디바이스(100) 및 사용자 디바이스(200)는 트랜시버(220)를 이용해 상호 간 통신을 수행하거나, 기타 다른 장치와 통신을 수행할 수 있다.

여기서, 통신, 즉 데이터의 송수신은 유선 또는 무선으로 이루어질 수 있다. 이를 위해 트랜시버(220)는 LAN(Local Area Network)를 통해 인터넷 등에 접속하는 유선 통신 모듈, 이동 통신 기지국을 거쳐 이동 통신 네트워크에 접속하여 데이터를 송수신하는 이동 통신 모듈, 와이파이(Wi-Fi) 같은 WLAN(Wireless Local Area Network) 계열의 통신 방식이나 블루투스(Bluetooth), 직비(Zigbee)와 같은 WPAN(Wireless Personal Area Network) 계열의 통신 방식을 이용하는 근거리 통신 모듈, GPS(Global Positioning System)과 같은 GNSS(Global Navigation Satellite System)을 이용하는 위성 통신 모듈 또는 이들의 조합을 포함할 수 있다.

스토리지(230)는 각종 정보를 저장할 수 있다. 스토리지(230)는 데이터를 임시적으로 또는 반영구적으로 저장할 수 있다. 예를 들어, 서버 디바이스(100)의 스토리지(230)에는 서버 디바이스(100)를 구동하기 위한 운용 프로그램(OS: Operating System), 웹 사이트를 호스팅하기 위한 데이터나 점자 생성을 위한 프로그램 내지는 어플리케이션(예를 들어, 웹 어플리케이션)에 관한 데이터 등이 저장될 수 있다. 또, 스토리지(230)는 상술한 바와 같이 모듈들을 컴퓨터 코드 형태로 저장할 수 있다.

스토리지(230)의 예로는 하드 디스크(HDD: Hard Disk Drive), SSD(Solid State Drive), 플래쉬 메모리(flash memory), 롬(ROM: Read-Only Memory), 램(RAM: Random Access Memory) 등이 있을 수 있다. 이러한 스토리지(230)는 내장 타입 또는 탈부착 가능한 타입으로 제공될 수 있다.

프로세서(240)는 서버 디바이스(100) 및 사용자 디바이스(200)의 전반적인 동작을 제어한다. 이를 위해 프로세서(240)는 각종 정보의 연산 및 처리를 수행하고 서버 디바이스(100)의 구성요소들의 동작을 제어할 수 있다. 예를 들어, 프로세서(240)는 정보 제공을 위한 프로그램 내지 어플리케이션을 실행시킬 수 있을 것이다. 프로세서(240)는 하드웨어, 소프트웨어 또는 이들의 조합에 따라 컴퓨터나 이와 유사한 장치로 구현될 수 있다. 하드웨어적으로 프로세서(240)는 전기적인 신호를 처리하여 제어 기능을 수행하는 전자 회로 형태로 구현될 수 있으며, 소프트웨어적으로는 하드웨어적인 프로세서(240)를 구동시키는 프로그램 형태로 구현될 수 있다. 한편, 이하의 설명에서 특별한 언급이 없는 경우에는 서버 디바이스(100) 및 사용자 디바이스(200)의 동작은 프로세서(240)의 제어에 의해 수행되는 것으로 해석될 수 있다. 즉, 상술한 정보 제공 시스템에 구현되는 모듈들이 실행되는 경우, 모듈들은 프로세서(240)가 서버 디바이스(100) 및 사용자 디바이스(200)를 이하의 동작들을 수행하도록 제어하는 것으로 해석될 수 있다.

요약하면, 다양한 실시예들은 다양한 수단을 통해 구현될 수 있다. 예를 들어, 다양한 실시예들은 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다.

하드웨어에 의한 구현의 경우, 다양한 실시예들에 따른 방법은 하나 또는 그 이상의 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서, 콘트롤러, 마이크로 콘트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.

펌웨어나 소프트웨어에 의한 구현의 경우, 다양한 실시예들에 따른 방법은 이하에서 설명된 기능 또는 동작들을 수행하는 모듈, 절차 또는 함수 등의 형태로 구현될 수 있다. 예를 들어, 소프트웨어 코드는 메모리에 저장되어 프로세서에 의해 구동될 수 있다. 상기 메모리는 상기 프로세서 내부 또는 외부에 위치할 수 있으며, 이미 공지된 다양한 수단에 의해 상기 프로세서와 데이터를 주고받을 수 있다.

이하에서는, 상기와 같은 기술적 사상에 기반하여 다양한 실시예들에 대해 보다 상세히 설명한다. 이하에서 설명되는 다양한 실시예들에 대해서는 앞서 설명한 내용들이 적용될 수 있다. 예를 들어, 이하에서 설명되는 다양한 실시예들에서 정의되지 않은 동작, 기능, 용어 등은 앞서 설명한 내용들에 기반하여 수행되고 설명될 수 있다.

이하의 설명에서는 서버 디바이스(100)가 코드 커버리지 분석 결과와 테스트 결과를 비교한 비교 정보를 제공하는 동작을 수행함을 전제로 다양한 실시예들에 대하여 설명하며, 다양한 실시예들에 따르면, 서비스의 관리자를 위한 사용자 디바이스(200)가 서버 디바이스(100)로부터 수신한 비교 정보를 출력하여 제공할 수 있다.

도 3은 다양한 실시예들에 따른 정보 제공을 위한 서버 디바이스(100)의 동작 방법을 도시한 도면이다.

도 3에 따를 때 서버 디바이스(100)는 코드 커버리지 분석 결과와 테스트 결과를 비교한 비교 정보를 제공하며, 구체적으로, 서비스 상의 복수의 사용자들로부터 획득된 요청 정보의 처리에 기반하여 서비스에 대한 코드 커버리지를 분석하는 코드 커버리지 툴 및 서비스에 대한 코드 커버리지 분석을 모의로 테스트 하는 모의 테스트 툴을 설정하고(301), 코드 커버리지 툴에 기반하여 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보 및 모의 테스트 툴에 기반하여 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 테스트 결과 정보를 획득하며(303), 코드 커버리지 분석 결과 정보 및 테스트 결과 정보를 비교한 비교 정보를 제공할 수 있다(305).

도 3에 따라 서버 디바이스(100)가 비교 정보를 제공하는 동작은 서버 디바이스(100)가 제공하는 서비스 또는 서버 디바이스(100)와 관련된 서비스에 대하여 수행될 수 있으며, 상기 서비스는 서비스에서 판매되는 복수의 아이템들을 서비스를 이용하는 복수의 사용자가 주문 및 구매할 수 있는 서비스에 해당할 수 있다. 서비스에서 판매되는 복수의 아이템들은 아이템의 종류 또는 타입 등에 제한되지 않고 판매자가 아이템을 판매하기 위해 등록하는 다양한 종류 또는 타입의 아이템을 포함할 수 있다.

다양한 실시예들에 따르면, 동작 301에서, 서버 디바이스(100)는 서비스 상의 복수의 사용자들로부터 획득된 요청 정보의 처리에 기반하여 서비스에 대한 코드 커버리지를 분석하는 코드 커버리지 툴 및 서비스에 대한 코드 커버리지 분석을 모의로 테스트 하는 모의 테스트 툴을 설정할 수 있다.

예를 들어, 코드 커버리지(code coverage) 분석은 서비스를 위한 시스템 또는 소프트웨어를 구축하는 코드가 실제로 실행되었는지 여부를 분석하는 동작을 의미할 수 있으며, 코드 커버리지 툴은 코드 커버리지를 분석하기 위해 시스템 또는 소프트웨어에 적용 가능한 소프트웨어 툴 또는 프로그래밍 툴을 의미할 수 있다.

예를 들어, 동작 301에 따라 서버 디바이스(100)가 설정하는 코드 커버리지 툴은 일정한 주기로 실행되도록 설정될 수 있다. 서비스를 관리하는 차원에서 코드 커버리지가 지속적으로 분석될 수 있도록 서버 디바이스(100)는 코드 커버리지 툴이 일정한 주기마다 실행되도록 설정할 수 있으며, 구체적으로, 사용자들이 서비스를 많이 이용하는 시간대를 피해 사용자의 이용률이 적은 새벽 시간대 등에서 일정한 날짜 간격으로 코드 커버리지 툴이 실행되도록 설정할 수 있다. 마찬가지로, 301에 따라 서버 디바이스(100)가 설정하는 모의 테스트 툴 역시 일정한 주기로 실행되도록 설정될 수 있다. 이 때 코드 커버리지 툴이 실행되는 주기와 모의 테스트 툴이 실행되는 주기는 각 툴을 위해 개별적으로 설정되는 것일 수 있다.

예를 들어, 동작 301에 따라 서버 디바이스(100)가 설정하는 모의 테스트 툴은, 소스 코드에서 메소드(method)를 설정하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제1 모의 테스트 툴에 해당할 수 있다. 즉, 서버 디바이스(100)는 일련의 소스 코드 중 메소드를 설정하기 위해 작성된 코드들에 대하여 코드 커버리지 분석을 모의로 테스트 하는 모의 테스트 툴을 설정할 수 있다. 여기서, 메소드란 소스 코드 내에서 특정한 작업을 수행하기 위한　코드들의 집합을 의미할 수 있으며, 비슷한 관점에서 상기 제1 모의 테스트 툴은 메소드를 설정하는 코드들뿐 아니라 클래스(class) 혹은 쓰레드(thread)를 설정하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 모의 테스트 툴에 해당할 수도 있다.

예를 들어, 동작 301에 따라 서버 디바이스(100)가 설정하는 모의 테스트 툴은, API 도메인을 위한 요청 정보의 입력 및 응답 정보의 출력을 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제2 모의 테스트 툴에 해당할 수 있다. 즉, 서버 디바이스(100)는 일련의 소스 코드 중 API 도메인에서 요청 정보가 입력되거나 응답 정보가 출력되는 기능을 수행하기 위해 작성된 코드들에 대하여 코드 커버리지 분석을 모의로 테스트 하는 모의 테스트 툴을 설정할 수 있다.

예를 들어, 동작 301에 따라 서버 디바이스(100)가 설정하는 모의 테스트 툴은, UI(User Interface)를 위한 정보 처리를 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제3 모의 테스트 툴에 해당할 수 있다. 즉, 서버 디바이스(100)는 일련의 소스 코드 중 서비스 상의 UI를 위한 정보 처리 기능을 수행하기 위해 작성된 코드들에 대하여 코드 커버리지 분석을 모의로 테스트 하는 모의 테스트 툴을 설정할 수 있다.

다양한 실시예들에 따르면, 동작 303에서, 서버 디바이스(100)는 코드 커버리지 툴에 기반하여 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보 및 모의 테스트 툴에 기반하여 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 테스트 결과 정보를 획득할 수 있다.

예를 들어, 동작 303에 따라 서버 디바이스(100)가 획득하는 코드 커버리지 분석 결과 정보는, 서비스 상의 페이지를 구현하는 소스 코드에서 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들에 대한 정보 및 소스 코드에서 사용자에 의한 이용 이력이 확인되지 않는 제2 코드 라인들에 대한 정보를 포함할 수 있다. 즉, 사용자에 의한 이용 이력이 확인되는지 여부를 기반으로 서비스 상의 페이지를 구현하는 소스 코드 내 코드들을 분석한 정보가 코드 커버리지 분석 결과 정보에 포함될 수 있다.

이 때, 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들과 사용자에 의한 이용 이력이 확인되지 않는 제2 코드 라인들을 식별하기 위해 각 코드 라인들을 위한 식별 정보가 설정될 수 있다. 코드 커버리지 분석 결과 정보는 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들을 위한 제1 식별 정보와 사용자에 의한 이용 이력이 확인되지 않는 제2 코드 라인들을 위한 제2 식별 정보를 설정할 수 있으며, 이와 같은 제1 식별 정보 및 제2 식별 정보는 상이한 색상에 기반하여 식별되도록 설정될 수 있다.

예를 들어, 동작 303에 따라 서버 디바이스(100)가 획득하는 코드 커버리지 분석 결과 정보는, 서비스 상의 페이지를 구현하는 소스 코드 중에서 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들의 비율에 대한 정보를 포함할 수 있다. 소스 코드 중에서 사용자에 의한 이용 이력이 확인되는 것으로 분석된 코드 라인들의 비율을 수치화 한 정보를 제공함으로써, 서비스 상의 페이지에 대한 코드 커버리지의 수준을 확인할 수 있도록 관리할 수 있다.

예를 들어, 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보를 획득하는 동작 303은, 서비스에 포함된 각 API (Application Programming Interface) 도메인을 위한 페이지에 대하여 코드 커버리지 툴을 적용하고 각 API 도메인에 대응하는 서비스 상의 개별 페이지에 대한 개별 코드 커버리지 분석 결과를 포함한 정보를 획득하는 동작에 해당할 수 있다.

구체적으로, 서버 디바이스(100)는 서비스를 위한 복수의 API 도메인에 포함된 각 API 도메인을 확인하고, API 도메인 단위에서 코드 커버리지 툴을 실행해 각 API 도메인에 대응하는 각 코드 커버리지 분석 결과를 획득할 수 있다. 즉, 각 API 도메인을 확인한 서버 디바이스(100)는 각 API 도메인에 대응하는 서비스 상의 하나 이상의 페이지에 대해 코드 커버리지 툴을 실행하며, 각 API 도메인에 대응하는 각 코드 커버리지 분석 결과 정보를 획득할 수 있다.

또한, 만약 API 도메인에 대한 코드 커버리지 분석 결과 정보를 관리자가 확인하려 하는 경우에 있어서, 관리자로부터 서비스에 포함된 복수의 API 도메인들 중 특정의 제1 API 도메인을 선택하는 입력을 획득한다면, 서버 디바이스(100)는 상기 입력에 대응하여 제1 API 도메인에 대응하는 제1 코드 커버리지 분석 결과 정보를 제공할 수 있다. 이 때 제1 API 도메인에 대응하는 제1 코드 커버리지 분석 결과 정보는, 제1 API 도메인에 대응하는 서비스 상의 개별 페이지에 대한 개별 코드 커버리지 분석 결과를 종합하여 포함한 정보에 해당할 수 있다.

예를 들어, 동작 303에 따라 서버 디바이스(100)가 획득하는 테스트 결과 정보는, 코드 커버리지 분석을 모의로 테스트 수행 가능하도록 설정된 모의 테스트 툴에 따라 코드 커버리지 분석이 시뮬레이션(simulation) 된 결과에 대한 정보를 포함할 수 있다. 이와 같은 테스트 결과 정보는, 코드 커버리지 분석에 대한 시뮬레이션 결과로서 서비스 상의 페이지를 구현하는 소스 코드 상의 코드들에 대하여 사용자의 이용 이력이 얼마나 확인되는지 여부 등에 대한 정보를 포함할 수 있다.

다양한 실시예들에 따르면, 동작 305에서, 서버 디바이스(100)는 코드 커버리지 분석 결과 정보 및 테스트 결과 정보를 비교한 비교 정보를 제공할 수 있다.

예를 들어, 동작 305에 따라 서버 디바이스(100)가 제공하는 비교 정보는, 서비스 상의 페이지를 구현하는 소스 코드 중에서 코드 커버리지 분석 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석된 코드 라인들의 제1 비율과 소스 코드 중에서 테스트 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 판단된 코드 라인들의 제2 비율을 비교한 정보를 포함할 수 있다. 즉, 소스 코드 중에서 코드 커버리지 분석 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석된 코드 라인들의 비율을 수치화 한 정보와 소스 코드 중에서 테스트 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 판단된 코드 라인들의 비율을 수치화 한 정보를 비교함으로써, 모의 테스트 툴에 의한 테스트 결과에 포함된 코드 커버리지 비율이 실제 코드 커버리지 분석 결과에 포함된 코드 커버리지 비율에 얼마나 부합하는지 확인하도록 관리할 수 있다.

예를 들어, 동작 305에 따라 서버 디바이스(100)가 제공하는 비교 정보는, 서비스 상의 페이지를 구현하는 소스 코드 중에서 코드 커버리지 툴에 의한 코드 커버리지 분석 결과와 모의 테스트 툴에 의한 테스트 결과가 상이한 것으로 확인된 일부의 코드 라인들에 대한 정보를 포함할 수 있다. 즉, 서비스 상의 페이지를 대상으로 실제로 코드 커버리지 분석을 수행한 결과와 모의로 코드 커버리지 분석을 테스트 한 테스트 결과를 비교하여 그 결과가 상이한 부분에 해당하는 코드 라인들에 대한 정보가 동작 305에 따라 서버 디바이스(100)가 제공하는 비교 정보에 포함될 수 있다.

구체적으로, 동작 305에 따라 서버 디바이스(100)가 제공하는 비교 정보에서 코드 커버리지 분석 결과와 테스트 결과가 상이한 것으로 확인된 일부의 코드 라인들은, 코드 커버리지 툴에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석되는데 반해, 모의 테스트 툴에 따라 사용자에 의한 이용 이력이 확인되지 않는 것으로 판단된 코드 라인을 포함할 수 있다. 서비스 상의 페이지를 대상으로 실제로 코드 커버리지 분석을 수행한 결과에서는 사용자에 의한 이용 이력이 확인되나 모의 테스트 결과에서는 사용자에 의한 이용 이력이 확인되지 않는 코드 라인들은 모의 테스트 툴이 제대로 커버하지 못하는 것으로 판단되는 코드 라인에 해당하므로, 이와 같은 코드 라인들은 모의 테스트 툴을 보완하기 위해 확인이 필요한 것으로 결정되는 코드 라인일 수 있다.

코드 커버리지 툴에 따라서는 사용자에 의한 이용 이력이 확인되는 것으로 분석되지만 모의 테스트 툴에 따라서는 사용자에 의한 이용 이력이 확인되지 않는 것으로 판단된 일부의 코드 라인에 대한 정보를 서버 디바이스(100)가 비교 정보를 통해 확인하는 경우, 서버 디바이스(100)는 상기와 같은 일부의 코드 라인에 대한 정보를 기반으로 모의 테스트 툴을 더 적합하게 업데이트 하여 업데이트 된 모의 테스트 툴에 따른 테스트 결과를 제공하는 동작을 도 4와 같이 수행할 수도 있다.

도 4는 서버 디바이스(100)가 업데이트 된 모의 테스트 툴에 기반하여 서비스 상의 페이지에 대한 코드 커버리지 분석을 모의로 테스트 한 모의 테스트 업데이트 결과 정보를 제공하는 동작 방법을 도시한 도면이다.

서버 디바이스(100)는, 서비스 상의 페이지를 구현하는 소스 코드 중에서 코드 커버리지 툴에 의한 코드 커버리지 분석 결과와 모의 테스트 툴에 의한 테스트 결과가 상이한 것으로 확인된 일부의 코드 라인들에 대한 정보를 확인할 수 있다(401). 이 때, 동작 401에 따라 확인되는 일부의 코드 라인들은, 코드 커버리지 툴에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석되는데 반해, 모의 테스트 툴에 따라 사용자에 의한 이용 이력이 확인되지 않는 것으로 판단된 코드 라인을 포함할 수 있다.

이후 서버 디바이스(100)는 확인된 일부의 코드 라인들에 대한 정보에 기반하여 모의 테스트 툴을 업데이트 하기 위한 툴 업데이트 정보를 획득할 수 있으며(403), 툴 업데이트 정보에 기반하여 업데이트 된 모의 테스트 툴을 확인할 수 있다(405). 여기서 툴 업데이트 정보는 실제 코드 커버리지 분석 결과에 보다 부합할 수 있도록 관리자가 모의 테스트 툴을 직접 수정한 업데이트 사항을 포함하는 정보에 해당하거나, 혹은 서버 디바이스(100)가 모의 테스트 툴 상에서 보완이 필요하다고 판단되는 부분을 확인하고 이를 자체적으로 수정한 업데이트 사항을 포함하는 정보에 해당할 수도 있다.

업데이트 된 모의 테스트 툴을 확인한 서버 디바이스(100)는 업데이트 된 모의 테스트 툴에 따라 서비스 상의 페이지에 대한 코드 커버리지 분석을 모의로 테스트 하도록 설정할 수 있으며, 서비스 상의 페이지에 대한 코드 커버리지 분석을 다시 테스트 한 모의 테스트 업데이트 결과 정보를 획득하여 제공할 수 있다(407).

예를 들어, 도 4에 따라 모의 테스트 업데이트 결과 정보를 제공하는 서버 디바이스(100)는, 모의 테스트 업데이트 결과 정보와 코드 커버리지 분석 결과 정보를 재차 비교하고, 모의 테스트 업데이트 결과 정보와 코드 커버리지 분석 결과 정보를 비교한 비교 정보를 획득하여, 획득한 비교 정보에 따라 업데이트 된 모의 테스트 툴에 대한 피드백 정보를 제공하는 동작을 수행할 수도 있다. 즉 서버 디바이스(100)는, 모의 테스트 툴을 업데이트 했을 때 업데이트 된 모의 테스트 툴에 따른 모의 테스트 업데이트 결과가 실제 코드 커버리지 분석 결과와 비교해 어느 정도의 정확도를 가지도록 보완되었는지 여부에 대한 피드백을 생성하여 제공할 수 있다.

예를 들어, 도 4에 따라 모의 테스트 업데이트 결과 정보를 제공하는 서버 디바이스(100)가 획득하는 툴 업데이트 정보는, 서비스의 페이지 단위로 업데이트가 수행되도록 관리하는 정보일 수 있다. 일 예로, 서비스의 어느 특정 페이지를 위한 소스 코드 상에서 코드 커버리지 툴에 의해 사용자의 이용 이력이 확인된 하나의 메소드에 대응하는 코드 라인들을 포함한 코드 집합에 대해서, 제1 모의 테스트 툴에 의한 테스트 결과로는 상기 코드 집합이 사용자에 의해 이용된 바가 없었던 것으로 나타났다면, 상기 코드 집합이 포함된 상기 특정 페이지가 업데이트를 통해 보완해야 할 대상으로서 제1 모의 테스트 툴을 위해 확인될 수 있다.

이 경우 툴 업데이트 정보는 상기 특정 페이지에 대응하는 API 도메인 및 상기 특정 페이지를 지시할 수 있는 지시 정보를 포함할 수 있으며, 제1 모의 테스트 툴이 상기 특정 페이지에 대한 테스트 결과를 보완할 수 있도록 설정한 업데이트 사항에 대한 업데이트 사항 정보 또한 포함할 수 있다. 툴 업데이트 정보에 포함된 지시 정보와 업데이트 사항 정보를 기반으로, 서버 디바이스(100)는 상기 특정 페이지와 관련된 제1 모의 테스트 툴의 테스트 설정 부분을 업데이트 할 수 있다.

예를 들어, 코드 커버리지 툴에 의한 코드 커버리지 분석 결과에 부합할 수 있도록 모의 테스트 툴을 업데이트 하는데 있어서, 업데이트가 필요한 모의 테스트 툴의 테스트 설정 부분이 많아 그에 대응하여 툴 업데이트 정보가 매우 방대해진다면, 모의 테스트 툴을 실행하는 장치의 사양에 따라서는 방대해진 툴 업데이트 정보에 의한 업데이트 과정에서 과부하가 발생할 수 있다. 따라서 서버 디바이스(100)는 툴 업데이트 정보의 크기가 일정 크기를 초과하지 않도록 툴 업데이트 정보가 설정될 수 있는 임계 크기를 설정할 수 있다. 또한, 임계 크기를 설정함에 따라 모의 테스트 툴에서 업데이트가 필요한 것으로 판단된 테스트 설정 부분의 업데이트를 위한 정보가 모두 툴 업데이트 정보에 포함되지 못하는 경우, 서버 디바이스(100)는 툴 업데이트 정보를 통해 업데이트 될 대상인 테스트 설정 부분에 대응하는 페이지에 대한 업데이트 우선순위를 부여하여, 업데이트 우선순위가 높은 페이지와 관련된 모의 테스트 툴의 테스트 설정 부분을 업데이트 하는 정보가 우선적으로 툴 업데이트 정보에 포함되도록 관리할 수 있다.

전술한 것처럼 툴 업데이트 정보는 서비스에 포함된 특정 API 도메인에 대응하는 특정 페이지에 대해서 상기 특정 페이지와 관련된 모의 테스트 툴의 테스트 설정 부분을 업데이트 할 수 있고, 이를 위해 상기 특정 API 도메인과 상기 특정 페이지를 지시할 수 있다. 이 때 서버 디바이스(100)는 이와 같이 지시 정보를 통해 지시되는 API 도메인의 우선순위와 페이지의 우선순위를 설정할 수 있다.

서버 디바이스(100)가 설정하는 API 도메인의 우선순위는 서비스 상 API 도메인에 대한 복수의 사용자의 이용률에 기반하여 설정될 수 있으며, 구체적으로, 사용자 이용률이 높은 API 도메인일수록 높은 우선순위를 가질 수 있다. 일 예로, 제1 API 도메인에 포함된 제1 페이지 및 제2 API 도메인에 포함된 제2 페이지와 관련된 테스트 설정 부분들에 대한 모의 테스트 툴의 업데이트가 필요한 경우, 제1 API 도메인의 사용자 이용률이 제2 API 도메인의 사용자 이용률 보다 높다면 상기 제1 페이지와 관련된 테스트 설정 부분에 대한 모의 테스트 툴의 업데이트가 상기 제2 페이지와 관련된 테스트 설정 부분 보다 우선적으로 수행될 수 있게 툴 업데이트 정보가 설정될 수 있다.

또한, 서버 디바이스(100)가 설정하는 페이지의 우선순위는 동일한 API 도메인에 포함된 여러 페이지에 대한 복수의 사용자의 이용률에 기반하여 설정될 수 있으며, 구체적으로, 하나의 API 도메인에 포함된 여러 페이지 중 사용자 이용률이 높은 페이지일수록 높은 우선순위를 가질 수 있다. 일 예로, 제1 API 도메인에 포함된 제1 페이지 및 제1 API 도메인에 포함된 제3 페이지와 관련된 테스트 설정 부분들에 대한 모의 테스트 툴의 업데이트가 필요한 경우, 제1 페이지의 사용자 이용률이 제3 페이지의 사용자 이용률 보다 높다면 상기 제1 페이지와 관련된 테스트 설정 부분에 대한 모의 테스트 툴의 업데이트가 상기 제3 페이지와 관련된 테스트 설정 부분 보다 우선적으로 수행될 수 있게 툴 업데이트 정보가 설정될 수 있다.

서버 디바이스(100)는 API 도메인의 우선순위를 먼저 적용하고 페이지의 우선순위를 이후에 적용하여 서비스 상 각 API 도메인에 포함된 페이지에 대한 업데이트 우선순위를 결정할 수 있으며, 결정된 업데이트 우선순위에 따라 툴 업데이트 정보가 설정되도록 관리할 수 있다. 전술한 예시들에 따를 경우, 상기 제1 페이지와 관련된 테스트 설정 부분, 상기 제3 페이지와 관련된 테스트 설정 부분, 및 상기 제2 페이지와 관련된 테스트 설정 부분의 순서로 각 테스트 설정 부분을 업데이트 하기 위한 정보가 툴 업데이트 정보에 포함될 수 있게 된다.

도 5는 코드 커버리지 툴 및 모의 테스트 툴에 기반하여 코드 커버리지 분석 결과 정보 및 테스트 결과 정보에 대한 비교 정보가 획득되는 블록도를 도시한 도면이다.

도 5에서는, 서비스를 위한 전체 서버 중 일부의 서버 혹은 지정된 서버에서 소프트웨어 툴을 적용 가능하도록 관리하는 "Canary" 시스템을 구축하고, 이와 같이 구축된 "Canary" 시스템에 따른 요청 정보의 처리에 기반하여 코드 커버리지를 분석하는 코드 커버리지 툴("Coverage tool")이 서버 디바이스(100)에 의해 설정될 수 있다(501). 또한, 소스 코드에서 메소드를 설정하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제1 모의 테스트 툴("UT"), API 도메인을 위한 요청 정보의 입력 및 응답 정보의 출력을 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제2 모의 테스트 툴("Automation"), 및/또는 UI(User Interface)를 위한 정보 처리를 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제3 모의 테스트 툴("Manual testing") 중 적어도 일부가 서버 디바이스(100)에 의해 설정될 수 있다(503).

설정된 코드 커버리지 툴에 기반하여 서비스 상의 페이지를 대상으로 코드 커버리지 분석의 결과를 포함한 코드 커버리지 분석 결과 정보가 획득되고, 설정된 모의 테스트 툴에 기반하여 서비스 상의 페이지를 대상으로 코드 커버리지 분석을 모의로 테스트 수행한 결과를 포함한 테스트 결과 정보가 획득되며, 이를 통해 코드 커버리지 분석 결과 정보 및 테스트 결과 정보를 비교한 비교 정보가 획득될 수 있다(505).

도 3 내지 도 5에 따라 서버 디바이스(100)가 코드 커버리지 분석 결과와 테스트 결과를 비교한 비교 정보를 제공하는 동작 방법을 수행하는 과정에서 각 정보들이 다양한 형태로 결합될 수 있음은 자명하다.

도 6 내지 도 9는 다양한 실시예들에 따른 정보 제공을 위한 UI/UX의 일 예시들을 도시한 도면이다. 예를 들어, 도 6 내지 도 9의 예시는 사용자 디바이스(200)를 위한 UI/UX (user interface/user experience)일 수 있으며, 이하의 도면에서 설명하는 각 실시예들은 도 6 내지 도 9에서 전술한 서버 디바이스(100)의 동작에 기반하여 수행될 수 있다.

구체적으로, 이하의 도면에서 설명하는 사용자 디바이스(200)를 위한 UI/UX의 각 실시예들은, 도 3 내지 도 5에서 전술한 동작들에 기반한 서버 디바이스(100)가 정보를 사용자 디바이스(200)에 제공한 뒤 이를 사용자 디바이스(200)가 출력하는 형태로서 수행될 수 있다. 다만 이하의 도면에서 설명하는 UI/UX의 각 실시예가 이와 같은 형태에 한정되어 수행되는 것은 아니며, UI/UX의 각 실시예를 구현할 수 있는 다양한 형태로서 수행될 수 있다.

도 6은 다양한 실시예들에 따른 사용자 디바이스(200)가 서비스 상의 개별 페이지에 대응하는 코드 커버리지 분석 결과 정보를 출력하는 일 예시를 도시한 도면이다.

도 6에서 사용자 디바이스(200)가 출력하는 코드 커버리지 분석 결과 정보는 서비스 상의 어느 페이지를 구현하는 소스 코드에 대한 코드 커버리지 분석 결과를 포함한 정보일 수 있다.

도 6에서 사용자 디바이스(200)가 출력하는 코드 커버리지 분석 결과 정보는, 소스 코드 내에서 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들에 대한 정보(601) 및 사용자에 의한 이용 이력이 확인되지 않는 제2 코드 라인들에 대한 정보(603)를 포함하도록 설정될 수 있다.

이 때, 소스 코드 내에서 제1 코드 라인들에 대한 정보(601)를 식별하기 위한 제1 식별 정보와 소스 코드 내에서 제2 코드 라인들에 대한 정보(603)를 식별하기 위한 제2 식별 정보가 각각 설정될 수 있으며, 제1 식별 정보와 제2 식별 정보는 상이한 색상에 기반하여 식별되도록 설정될 수 있다. 즉, 제1 코드 라인들에 대한 정보(601)와 제2 코드 라인들에 대한 정보(603)는 서로 상이한 색상으로서 소스 코드 내에서 구별될 수 있다.

도 7은 다양한 실시예들에 따른 사용자 디바이스(200)가 API 도메인에 대응하는 코드 커버리지 분석 결과 정보를 출력하는 일 예시를 도시한 도면이다.

도 7에서 사용자 디바이스(200)가 출력하는 코드 커버리지 분석 결과 정보는 API 도메인에 대응하는 다양한 페이지에 대한 코드 커버리지 분석 결과를 포함하도록 설정될 수 있다.

도 7에서 사용자 디바이스(200)가 출력하는 코드 커버리지 분석 결과 정보는 서비스에 포함된 특정 API 도메인("modular_search")에 대응하여 확인되는 정보일 수 있으며, 여기에는 코드 커버리지 분석이 수행된 상기 API 도메인에 포함되는 서비스 상의 페이지들이 표시될 수 있다(701). 표시된 페이지들 중 하나의 페이지를 선택하는 입력이 있는 경우, 선택된 페이지에 대하여 도 6과 같은 코드 커버리지 분석 결과가 출력될 수 있다.

또한 도 7에서 사용자 디바이스(200)가 출력하는 코드 커버리지 분석 결과 정보에는, API 도메인에 포함된 각 페이지 별로, 각 페이지를 구현하는 소스 코드 중에서 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들의 비율이 어느 정도인지를 나타내는 수치에 대한 정보를 포함할 수 있다(703).

도 7과 같이 출력되는 API 도메인에 대한 코드 커버리지 분석 결과 정보를 통해, 서비스에 포함되는 API 도메인의 단위 별로 코드 커버리지 분석의 결과가 관리되도록 설정될 수 있다.

도 8 내지 도 9는 다양한 실시예들에 따른 사용자 디바이스(200)가 코드 커버리지 분석 결과 정보와 테스트 결과 정보를 비교한 비교 정보를 출력하는 일 예시를 도시한 도면이다.

도 8 내지 도 9는 비교 정보에 포함된 다양한 정보 중 코드 커버리지 분석 툴에 따른 실제 코드 커버리지의 비율과 모의 테스트 툴에 따른 모의 테스트 상 코드 커버리지의 비율을 비교한 그래프 정보를 포함할 수 있다.

도 8은 코드 커버리지 분석 툴에 따른 실제 코드 커버리지의 비율과, 소스 코드에서 메소드를 설정하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제1 모의 테스트 툴("UT Coverage")에 따른 모의 테스트 상 코드 커버리지의 비율("active_line_cov"-83%)을 비교한 그래프 정보를 포함할 수 있다(800). 또한, 도 9는 커버리지 분석 툴에 따른 실제 코드 커버리지의 비율과, API 도메인을 위한 요청 정보의 입력 및 응답 정보의 출력을 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제2 모의 테스트 툴("Automation Code Coverage")에 따른 모의 테스트 상 코드 커버리지의 비율("active_line_cov"-71%)을 비교한 그래프 정보를 포함할 수 있다(900).

도 8 내지 도 9에서 모의 테스트 툴에 따른 모의 테스트 상 코드 커버리지의 비율이 실제 코드 커버리지의 비율 보다 낮을 경우, 코드 커버리지 툴에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석되면서 모의 테스트 툴에 따라 사용자에 의한 이용 이력이 확인되지 않는 것으로 판단된 일부 코드 라인들이 존재하는 것일 수 있다. 따라서 상기와 같은 일부 코드 라인들에 대해서는 실제 코드 커버리지 분석 결과에 부합할 수 있도록 전술한 다양한 실시예들에 따라 모의 테스트 툴을 업데이트 할 수 있다.

도 6 내지 도 9의 사용자 디바이스(200)를 위한 UI/UX 및 사용자 디바이스(200)의 동작은 도 3 내지 도 5에서 전술한 서버 디바이스(100)의 동작과 연관되어 수행될 수 있으며, 도 6 내지 도 9의 UI/UX 예시는 본 발명의 개시를 위한 하나의 예시로서 본 발명의 다양한 실시예들이 도 6 내지 도 9의 UI/UX 형태에 한정되지 않으며 본 발명의 다양한 실시예들을 구현할 수 있는 모든 형태의 UI/UX에 따라 수행될 수 있다.

본 명세서와 도면에 개시된 본 발명의 실시예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 즉 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명의 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다. 또한 상기 각각의 실시 예는 필요에 따라 서로 조합되어 운용할 수 있다. 예컨대, 본 발명의 모든 실시 예는 일부분들이 서로 조합되어 시스템에 의해 구현될 수 있다.

또한, 본 발명에 따른 시스템 등에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다.

이와 같이, 본 발명의 다양한 실시예들은 특정 관점에서 컴퓨터 리드 가능 기록 매체(computer readable recording medium)에서 컴퓨터 리드 가능 코드(computer readable code)로서 구현될 수 있다. 컴퓨터 리드 가능 기록 매체는 컴퓨터 시스템에 의해 리드될 수 있는 데이터를 저장할 수 있는 임의의 데이터 저장 디바이스이다. 컴퓨터 리드 가능 기록 매체의 예들은 읽기 전용 메모리(read only memory: ROM)와, 랜덤-접속 메모리(random access memory: RAM)와, 컴팩트 디스크- 리드 온니 메모리(compact disk-read only memory: CD-ROM)들과, 마그네틱 테이프(magnetic tape)들과, 플로피 디스크(floppy disk)들과, 광 데이터 저장 디바이스들, 및 캐리어 웨이브(carrier wave)들(인터넷을 통한 데이터 송신 등)을 포함할 수 있다. 컴퓨터 리드 가능 기록 매체는 또한 네트워크 연결된 컴퓨터 시스템들을 통해 분산될 수 있고, 따라서 컴퓨터 리드 가능 코드는 분산 방식으로 저장 및 실행된다. 또한, 본 발명의 다양한 실시예들을 성취하기 위한 기능적 프로그램들, 코드, 및 코드 세그먼트(segment)들은 본 발명이 적용되는 분야에서 숙련된 프로그래머들에 의해 쉽게 해석될 수 있다.

또한 본 발명의 다양한 실시예들에 따른 장치 및 방법은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 소프트웨어는 예를 들어, 삭제 가능 또는 재 기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비 휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 콤팩트 디스크(compact disk: CD), DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 본 발명의 다양한 실시예들에 따른 방법은 제어부 및 메모리를 포함하는 컴퓨터 또는 이와 같은 메모리 또는 컴퓨터를 포함한 차량 등에 의해 구현될 수 있고, 이러한 메모리는 본 발명의 실시예들을 구현하는 명령들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다.

따라서, 본 발명은 본 명세서의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계(컴퓨터 등)로 읽을 수 있는 저장 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.

상기에서는 본 발명의 실시예들을 참조하여 설명하였지만, 본 명세서와 도면에 개시된 본 발명의 실시예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며 본 발명의 범위를 한정하고자 하는 것은 아니다. 또한 앞서 설명된 본 발명에 따른 실시예들은 예시적인 것에 불과하며, 당해 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 범위의 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 다음의 특허청구범위에 의해서 정해져야 할 것이다.

Claims

전자 장치가 정보를 제공하는 방법에 있어서,
상기 전자 장치와 관련된 서비스 상의 복수의 사용자들로부터 획득된 요청 정보의 처리에 기반하여 상기 서비스에 대한 코드 커버리지를 분석하는 코드 커버리지 툴(code coverage tool) 및 상기 서비스에 대한 코드 커버리지 분석을 모의로 테스트(test) 하는 모의 테스트 툴을 설정하는 단계;
상기 코드 커버리지 툴에 기반하여 상기 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보 및 상기 모의 테스트 툴에 기반하여 상기 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 테스트 결과 정보를 획득하는 단계; 및
상기 코드 커버리지 분석 결과 정보 및 상기 테스트 결과 정보를 비교한 비교 정보를 제공하는 단계를 포함하고,
상기 비교 정보는, 상기 서비스 상의 페이지를 구현하는 소스 코드 중에서 상기 코드 커버리지 툴에 의한 코드 커버리지 분석 결과와 상기 모의 테스트 툴에 의한 테스트 결과가 상이한 것으로 확인된 일부의 코드 라인들에 대한 정보를 포함하며,
상기 정보 제공 방법은,
상기 일부의 코드 라인들에 대한 정보에 기반하여 상기 모의 테스트 툴을 업데이트 하기 위한 툴 업데이트 정보를 획득하는 단계; 및
상기 툴 업데이트 정보에 기반하여 업데이트 된 모의 테스트 툴을 확인하는 단계를 더 포함하는,
정보 제공 방법.
제 1 항에 있어서,
상기 코드 커버리지 분석 결과 정보는,
상기 서비스 상의 페이지를 구현하는 소스 코드에서 사용자에 의한 이용 이력이 확인되는 제1 코드 라인들에 대한 정보, 및
상기 소스 코드에서 사용자에 의한 이용 이력이 확인되지 않는 제2 코드 라인들에 대한 정보를 포함하는,
정보 제공 방법.
제 2 항에 있어서,
상기 코드 커버리지 분석 결과 정보는, 상기 제1 코드 라인들을 위한 제1 식별 정보 및 상기 제2 코드 라인들을 위한 제2 식별 정보를 포함하고,
상기 제1 식별 정보 및 상기 제2 식별 정보는 상이한 색상에 기반하여 식별되는,
정보 제공 방법.
제 2 항에 있어서,
상기 코드 커버리지 분석 결과 정보는, 상기 소스 코드 중에서 상기 제1 코드 라인들의 비율에 대한 정보를 포함하는,
정보 제공 방법.
제 1 항에 있어서,
상기 코드 커버리지 분석 결과 정보를 획득하는 단계는,
상기 서비스를 위한 복수의 API(Application Programming Interface) 도메인들에 포함된 각 API 도메인을 확인하는 단계; 및
상기 각 API 도메인에 대응하는 상기 서비스 상의 하나 이상의 페이지에 대한 상기 코드 커버리지 툴의 실행에 기반하여, 상기 각 API 도메인에 대응하는 각 코드 커버리지 분석 결과 정보를 획득하는 단계를 포함하는,
정보 제공 방법.
제 5 항에 있어서,
상기 정보 제공 방법은,
상기 복수의 API 도메인들 중에서 제1 API 도메인을 선택하는 입력을 획득하는 단계; 및
상기 입력에 대응하여, 상기 제1 API 도메인에 대응하는 제1 코드 커버리지 분석 결과 정보를 제공하는 단계를 더 포함하고,
상기 제1 코드 커버리지 분석 결과 정보는, 상기 제1 API 도메인에 대응하는 상기 서비스 상의 개별 페이지에 대한 개별 코드 커버리지 분석 결과를 포함하는,
정보 제공 방법.
제 1 항에 있어서,
상기 코드 커버리지 툴은 일정한 주기로 실행되는,
정보 제공 방법.
제 1 항에 있어서,
상기 모의 테스트 툴은, 소스 코드에서 메소드(method)를 설정하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제1 모의 테스트 툴에 대응하는,
정보 제공 방법.
제 1 항에 있어서,
상기 모의 테스트 툴은, API 도메인을 위한 요청 정보의 입력 및 응답 정보의 출력을 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제2 모의 테스트 툴에 대응하는,
정보 제공 방법.
제 1 항에 있어서,
상기 모의 테스트 툴은, UI(User Interface)를 위한 정보 처리를 수행하는 코드들에 대한 코드 커버리지 분석을 모의로 테스트 하는 제3 모의 테스트 툴에 대응하는,
정보 제공 방법.
제 1 항에 있어서,
상기 비교 정보는,
상기 서비스 상의 페이지를 구현하는 소스 코드 중에서 상기 코드 커버리지 분석 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석된 코드 라인들의 제1 비율과 상기 소스 코드 중에서 상기 테스트 결과 정보에 따라 사용자에 의한 이용 이력이 확인되는 것으로 판단된 코드 라인들의 제2 비율을 비교한 정보를 포함하는,
정보 제공 방법.
삭제
제 1 항에 있어서,
상기 일부의 코드 라인들은, 상기 코드 커버리지 툴에 따라 사용자에 의한 이용 이력이 확인되는 것으로 분석되면서 상기 모의 테스트 툴에 따라 사용자에 의한 이용 이력이 확인되지 않는 것으로 판단된 코드 라인을 포함하는,
정보 제공 방법.
삭제
제 1 항에 있어서,
상기 정보 제공 방법은,
상기 업데이트 된 모의 테스트 툴에 기반하여 상기 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 모의 테스트 업데이트 결과 정보를 제공하는 단계를 더 포함하는,
정보 제공 방법.
제 15 항에 있어서,
상기 정보 제공 방법은,
상기 코드 커버리지 분석 결과 정보 및 상기 모의 테스트 업데이트 결과 정보를 비교한 비교 정보에 기반하여, 상기 업데이트 된 모의 테스트 툴에 대한 피드백 정보를 제공하는 단계를 더 포함하는,
정보 제공 방법.
정보를 제공하는 전자 장치에 있어서,
프로세서 (processor); 및
하나 이상의 인스트럭션 (instruction) 을 저장하는 하나 이상의 메모리 (memory) 를 포함하고,
상기 하나 이상의 인스트럭션은, 실행 시에, 상기 프로세서가:
상기 전자 장치와 관련된 서비스 상의 복수의 사용자들로부터 획득된 요청 정보의 처리에 기반하여 상기 서비스에 대한 코드 커버리지를 분석하는 코드 커버리지 툴(code coverage tool) 및 상기 서비스에 대한 코드 커버리지 분석을 모의로 테스트(test) 하는 모의 테스트 툴을 설정하는 단계;
상기 코드 커버리지 툴에 기반하여 상기 서비스 상의 페이지를 분석한 코드 커버리지 분석 결과 정보 및 상기 모의 테스트 툴에 기반하여 상기 서비스 상의 페이지에 대한 코드 커버리지 분석을 테스트 한 테스트 결과 정보를 획득하는 단계; 및
상기 코드 커버리지 분석 결과 정보 및 상기 테스트 결과 정보를 비교한 비교 정보를 제공하는 단계를 수행하도록 상기 프로세서를 제어하고,
상기 비교 정보는, 상기 서비스 상의 페이지를 구현하는 소스 코드 중에서 상기 코드 커버리지 툴에 의한 코드 커버리지 분석 결과와 상기 모의 테스트 툴에 의한 테스트 결과가 상이한 것으로 확인된 일부의 코드 라인들에 대한 정보를 포함하며,
상기 프로세서는,
상기 일부의 코드 라인들에 대한 정보에 기반하여 상기 모의 테스트 툴을 업데이트 하기 위한 툴 업데이트 정보를 획득하는 단계; 및
상기 툴 업데이트 정보에 기반하여 업데이트 된 모의 테스트 툴을 확인하는 단계를 더 수행하는,
전자 장치.