KR20160099778A - 스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 qa 시스템 및 이를 이용한 qa 방법 - Google Patents

스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 qa 시스템 및 이를 이용한 qa 방법 Download PDF

Info

Publication number
KR20160099778A
KR20160099778A KR1020150021712A KR20150021712A KR20160099778A KR 20160099778 A KR20160099778 A KR 20160099778A KR 1020150021712 A KR1020150021712 A KR 1020150021712A KR 20150021712 A KR20150021712 A KR 20150021712A KR 20160099778 A KR20160099778 A KR 20160099778A
Authority
KR
South Korea
Prior art keywords
tester
quality
information
application
quality inspection
Prior art date
Application number
KR1020150021712A
Other languages
English (en)
Inventor
임영환
김종근
김은영
심근호
심근수
심근정
양진현
Original Assignee
주식회사 세븐지엔씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 세븐지엔씨 filed Critical 주식회사 세븐지엔씨
Priority to KR1020150021712A priority Critical patent/KR20160099778A/ko
Publication of KR20160099778A publication Critical patent/KR20160099778A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3664—Environments for testing or debugging software
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3692—Test management for test results analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3696—Methods or tools to render software testable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G06F16/2358—Change logging, detection, and notification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/70—Software maintenance or management

Abstract

본 발명은 스마트폰 어플리케이션의 품질검사 시스템 및 방법에 관한 것으로서, 특히, 스마트폰 어플리케이션 사용자를 대상으로 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 품질검사 시스템 및 이를 이용한 품질검사 방법에 관한 것이다. 본 발명의 스마트폰 어플리테이션의 개방형 품질검사 시스템은, 웹 브라우저를 통해 사용자 등록 및 접속, 품질검사 신청, 품질검사 결과 보기, 정산 서비스를 제공하는 웹 서버와, 의뢰자 정보, 품질검사를 진행하고 있는 프로젝트의 정보, 테스터 풀 목록, 테스터 정보, 테스터 장비 목록, 정산 결과, 품질검사 결과 정보를 저장하고 있는 Info DB와, 테스터가 이용하는 스마트폰에 설치되어 있는 어플리케이션을 통해 테스터 등록 및 접속, 품질검사 참여, 정보보기, 정보 알람, 정산 서비스를 제공하는 API 서버와, 테스터가 품질검사를 진행하는 중에 발생되는 모든 테스트 로그, 에러 로그를 받아서 로그DB에 기록하는 기능을 하는 메시지큐와, 로그DB에 기록되어 있는 테스트 로그를 분석하여 품질검사 결과를 Info DB에 기록하는 로그 분석기와, 품질검사 신청 정보 및 테스터의 참여정보와 품질검사 결과를 분석하여 의뢰자와 테스터의 비용을 각각 계산하여 Info DB에 기록하는 정산관리자, 및 웹 브라우저, 스마트폰 어플리케이션을 포함하여 이루어진다.

Description

스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 QA 시스템 및 이를 이용한 QA 방법 {Quality assurance system and method for smartphone applications}
본 발명은 스마트폰 어플리케이션의 배포 및 QA(Quality Assurance) 방법에 관한 것이다.
본 발명은 스마트폰 어플리케이션의 품질 검사 시스템 및 방법에 관한 것으로서, 더욱 상세하게는, 인터넷 온라인상에서 어플리케이션 개발자 및 어플리케이션 테스터가 상호작용하여 스마트폰 어플리케이션의 품질을 검사할 수 있는 스마트폰 어플리케이션 품질 검사 시스템 및 방법에 관한 것이다.
스마트폰 어플리케이션이 처음 등장한 이후 경쟁이 심해질수록 앱 개발의 혁신요소가 아이디어 중심에서 사용성 편이와 품질 위주로 변화하고 있다. 1세대 어플리케이션은 주로 스마트폰 단독 기계에서 동작하는 것으로 신선한 아이디어가 성공의 핵심 요소였었다. 2세대에서는 경쟁이 심화 됨으로 인해 좋은 아이디어만 가지고 성공하는 것은 부족해 지고 어느정도 홍보를 통해 초기 사용자를 확보하는 것이 중요해 졌다. 최근의 3세대에서는 경쟁이 치열해 짐에 따라 아이디어가 좋고 홍보를 잘 하면서도 완벽하게 동작하는 어플리케이션을 만들어 출시하는 것이 필수화가 되었다. 따라서 현재 및 향후에는 개발된 어플리케이션을 철저하게 실제 사용할 사용자를 대상으로 충분한 시험을 거쳐 보완한 후에 어플리케이션 시장에 출시해야 하는 상황이 되었다. 이를 위해서는 품질 검사(QA)팀이 중요한 역할을 담당한다.
품질 검사를 위해서는 품질 검사 팀을 운영하는 것도 필요하지만 품질을 검사하기 위한 장비 또한 필요하다. 현재 국내에서 출시되어 있는 스마트폰의 종류는 260종이 넘는다. 이 많은 장비를 모두 가지고 QA를 진행할 수 있는 회사나 개발자는 많지 않다.
상기의 이유로 일정규모 이상의 회사들은 자체 QA 팀을 운영하여 배포하는 소프트웨어의 품질을 평가하고 개선하는 것이 가능할 수 있지만 중소기업 또는 개인 개발자들은 이러한 자체 QA 팀과 시험 장비를 운영하기가 불가능하다.
특별히 스마트폰 어플리케이션 개발 분야는 개인 개발자나 소규모 개발팀이 많이 존재하며 1인 창업기업도 많아지고 있다. 이런 개발팀에게 있어 QA는 인력적으로나 비용적으로 부담이 될 수 밖에 없다.
따라서, 본 발명이 이루고자 하는 기술적 과제는 상술한 종래의 스마트폰 어플리케이션의 시장환경 및 QA과정의 한계를 해결하는 새로운 개념하의 시스템을 구축하고자 하는 것이다.
본 발명의 방법에서는 기존의 자체 QA팀과 시험 장비를 운영하여 어플리케이션의 품질을 검사하는 방식이 아니라 다수의 스마트폰을 이용하는 일반 사용자가 어플리케이션 출시 이전에 품질을 검사할 수 있도록 하여 스마트폰 어플리케이션의 품질을 높일 수 있는 방식이 사용된다. 다수의 일반 스마트폰 사용자가 개방형으로 QA를 참여하게 되면 다양한 기종 및 조건의 사용자가 어플리케이션을 사용하는 효과로 인해 개발자는 자신의 어플리케이션이 다양한 장비나 운용환경의 조건을 만족하는지를 확인할 수 있게 되며 불특정 다수를 향한 어플리케이션의 홍보효과도 기대할 수 있게 된다.
상기 기술적 과제를 달성하기 위하여, 본 발명은 인터넷을 통해 다수의 스마트폰 사용자를 테스터로 모집하여 테스터 풀을 구성하고 품질 검사를 의뢰할 사용자가 인터넷을 통하여 품질 검사를 의뢰할 수 있는 웹 페이지를 구성하여 로그분석기, 로그DB, 메시지큐, 정산관리자가 구축되어 있는 서버에 인터넷을 이용하여 연결하는 개방형 앱 테스트 시스템을 제공한다.
상기 시스템을 통해 스마트폰 어플리케이션의 품질 검사가 이루어지는 과정을 정리하면
- 품질검사를 필요로 하는 의뢰자들이 웹 페이지를 이용하여 서버 시스템에 품질 검사를 신청한다. 이 때 신청 비용을 지불한다.
- 서버 시스템은 테스터 풀에서 의뢰자가 의뢰한 조건에 맞는 테스터들을 자동으로 매칭하여 테스터 그룹을 구성한다.
- 구성된 테스터 그룹과 의뢰자가 매칭되어 연결되면 의뢰자는 테스터들에게 품질 검사 요청을 하고 테스터들은 요청에 따른 시험을 수행한다.
- 테스터의 수행에 따라 로그가 서버에 기록되고 서버는 이를 분석하여 결과를 작성한다.
- 작성된 시험 결과를 의뢰자에게 제공한다.
- 의뢰자가 지불한 비용에서 일정의 수수료를 제외한 금액을 테스터들에게 보상으로 지불한다.
상기의 시스템과 과정을 통해 본 발명은 상기에 제시한 발명이 해결하고자 하는 과제를 해결한다.
상술한 바와 같이 본 발명은 다수의 다양한 사용자들이 스마트폰 어플리케이션의 품질 검사에 직접 참여하게 함으로써, 품질검사팀을 상시 운영하거나 시험장비를 확보할 수 없는 스마트폰 어플리케이션 개발팀 또는 개발자에게 다양한 기종과 조건의 품질검사 환경을 제공한다. 따라서, 품질검사가 필요한 개발팀에게는 스마트폰 어플리케이션을 출시하기 이전에 이를 이용할 사용자의 직접적인 의견을 얻어 품질을 개선할 수 있으며, 사용자가 직접 어플리케이션을 이용함으로서 어플리케이션을 미리 홍보하는 효과도 줄 수 있다.
도 1은 본 발명의 실시예에 의한 개방형 스마트폰 어플리케이션 품질검사 시스템의 구성도이다.
도 2는 본 발명에 따른 개방형 스마트폰 어플리케이션 품질검사 서비스를 이용하는 과정을 나타낸 유스케이스도이다.
본 발명의 실시예에 의한 개방형 스마트폰 어플리케이션 품질검사 시스템 및 이를 이용한 품질검사 방법을 첨부된 도면들을 참조하여 상세하게 설명한다.
도 1은 본 발명에 따라서, 인터넷 상에서 클라이언트/서버 형태로 작용하며 품질 검사 의뢰자와 테스터가 상호작용하여 스마트폰 어플리케이션의 품질을 검사할 수 있는 시스템의 전체 구조도를 도시한다. 도면에서 볼 수 있드시, 전체 시스템은 QA서버(100)와 테스터가 이용하는 스마트폰용 클라이언트(120), 의뢰자가 이용하는 웹브라우저 클라이언트(110)로 구성된다. 또한 QA서버(100)는 로그 분석기(101)와 로그DB(103), 메시지큐(102), 웹서버(104), 정보DB(105), API 서버(105), 정산관리자(106)로 구성된다.
이상의 각 서버 내 모듈의 기능을 설명하면 다음과 같다. 즉, 웹 서버(104)는 웹 브라우저를 통해 사용자 등록 및 접속, 어플리케이션 품질검사 신청, 품질검사 결과 보기, 정산 서비스를 제공한다. Info DB(105)는 의뢰자 정보, 품질검사를 진행하고 있는 프로젝트의 정보, 테스터 풀 목록, 테스터 정보, 테스터 장비 목록, 정산 결과, 품질검사 결과 정보를 저장하고 있다. API 서버(105)는 테스터가 이용하는 스마트폰에 설치되어 있는 어플리케이션을 통해 테스터 등록 및 접속, 품질검사 참여, 정보보기, 정보 알람(푸시메시지), 정산 서비스를 제공한다. 메시지큐(102)는 테스터가 품질검사를 진행하는 중에 발생되는 모든 테스트 로그, 에러 로그를 받아서 로그DB(103)에 기록하는 기능을 한다. 로그 분석기(101)는 로그DB(103)에 기록되어 있는 테스트 로그를 분석하여 품질검사 결과를 Info DB(105)에 기록한다. 정산관리자(106)는 품질검사 신청 정보 및 테스터의 참여정보와 품질검사 결과를 분석하여 의뢰자와 테스터의 비용을 각각 계산하여 Info DB(105)에 기록한다.
품질검사 의뢰자(111)는 웹 브라우저(110)를 사용하여 본 발명에서 제공하는 서비스를 이용하며, 테스터(122)는 스마트폰 어플리케이션(120)을 사용하여 본 발명에서 제공하는 서비스를 이용한다.
도 2는 본 발명에 따른 개방형 스마트폰 어플리케이션 품질검사 서비스를 이용하는 과정을 나타낸 유스케이스도로서, 의뢰자(210)가 본인이 개발하거나 관리하고 있는 스마트폰 어플리케이션의 품질 검사를 본 발명에 따른 시스템(200)에 의뢰하고, 그에 따라 테스터(220)가 품질검사에 참여하여 품질검사 결과를 의뢰자에게 제공하는 것을 예시하는 유스케이스도이다.
의뢰자(210)가 QA(품질검사) 시스템(200)에 품질검사에 참여할 수 있는 테스터의 조건과 테스터의 수를 설정하여 품질검사 신청을 하고 그에 대한 수수료를 결제하면 시스템(200)은 테스터(220)들의 정보를 모아놓은 테스터 풀에서 상기 신청에서 설정한 조건을 가진 테스터를 찾아서 테스터들에게 품질검사 참여에 대한 동의 메시지를 보낸다. 동의 메시지를 받은 테스터(220)는 품질검사 참여에 대한 응답을 시스템(200)에 한다. 상기 품질검사 신청에서 설정한 테스터 수만큼 참여 신청이 모아지면 시스템(200)은 테스터 모집이 완료되었음을 의뢰자(210)에게 알려주고 의뢰자와 참여 테스터들을 연결해주는 웹서비스 공간인 웍스페이스를 생성한다. 의뢰자(210)는 품질검사를 진행하고자 하는 스마트폰 어플리케이션을 시스템에 업로드 하고 품질검사에 대한 작업 지시사항을 웍스페이스에 등록한다. 시스템(200)은 상기 작업지시 사항 등록에 대한 내용을 테스터에게 문자나 푸시메시지로 알려준다. 알람을 받은 테스터(220)들은 시스템에서 품질검사를 진행할 스마트폰 어플리케이션을 자신의 스마트폰에 다운로드하고 설치한 후 작업 지시 사항에 따라 테스트를 진행한다. 테스터(220)가 테스트를 진행하면 로그 데이터가 시스템(200)에 수집된다. 또한 테스터(200)는 테스트를 진행하면서 품질검사를 진행하고 있는 어플리케이션에 대한 사용의견을 시스템(200)에 등록한다. 시스템(200)은 수집된 로그 데이터 및 테스터의 사용 의견을 분석하여 의뢰자(210)에게 결과를 제공한다. 의뢰자(210)는 결과를 확인하고 검토한 후 어플리케이션을 수정하여 다시 시스템에 업로드 하고 수정된 품질검사에 대한 작업 지시사항을 등록한다. 이후 어플리케이션 업로드 및 작업지시사항 등록부터 결과를 제공하는 과정(230)이 품질검사 신청 기간동안 반복된다. 의뢰자(210)가 품질검사 진행에 대한 종료 요청을 하거나 품질검사 신청 기간이 종료되면 시스템(200)은 사용비용을 정산하여 테스터에게 비용을 적립해주며 의뢰자(210)와 테스터(220)에게 정산내용을 제공한다.
100: 서버
110: 클라이언트(웹 브라우저)
111: 의뢰자
120: 클라이언트(스마트폰 어플리케이션)
121: 테스터 풀
122: 테스터
200: 품질 검사 시스템
210: 품질 검사 의뢰자(어플리케이션 개발자)
220: 테스터

Claims (2)

  1. 스마트폰 어플리케이션 사용자를 대상으로 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 품질검사 시스템에 있어서,

    웹 브라우저를 통해 사용자 등록 및 접속, 품질검사 신청, 품질검사 결과 보기, 정산 서비스를 제공하는 웹 서버,

    의뢰자 정보, 품질검사를 진행하고 있는 프로젝트의 정보, 테스터 풀 목록, 테스터 정보, 테스터 장비 목록, 정산 결과, 품질검사 결과 정보를 저장하고 있는 Info DB,

    테스터가 이용하는 스마트폰에 설치되어 있는 어플리케이션을 통해 테스터 등록 및 접속, 품질검사 참여, 정보보기, 정보 알람, 정산 서비스를 제공하는 API 서버,
    테스터가 품질검사를 진행하는 중에 발생되는 모든 테스트 로그, 에러 로그를 받아서 로그DB에 기록하는 기능을 하는 메시지큐,

    로그DB에 기록되어 있는 테스트 로그를 분석하여 품질검사 결과를 Info DB에 기록하는 로그 분석기,

    품질검사 신청 정보 및 테스터의 참여정보와 품질검사 결과를 분석하여 의뢰자와 테스터의 비용을 각각 계산하여 Info DB에 기록하는 정산관리자, 및

    웹 브라우저, 스마트폰 어플리케이션을 포함하여 이루어지는 스마트폰 어플리케이션 품질검사 시스템.



  2. 스마트폰 어플리케이션 사용자를 대상으로 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 품질검사 방법에 있어서,

    웹 서버에 의한 웹 브라우저를 통해 사용자 등록, 테스터 등록, 스마트폰 어플리케이션 품질 검사 신청 서비스를 제공하는 단계,

    QA 서버에 의한 테스터 풀 검색, 품질검사 신청시 설정한 조건의 테스터를 매칭하는 단계,

    API 서버에 의한 스마트폰 어플리케이션을 통해 품질검사 참여 요청, 참여 등록 서비스를 제공하는 단계,

    웹 서버에 의한 웹 브라우저를 통해 의뢰자에게 테스터 모집 결과, 품질검사 진행 서비스를 제공하는 단계,

    메시지 큐에 의한 스마트폰 어플리케이션을 통해 테스터가 진행하는 품질검사 로그 정보를 수집하는 단계,

    로그 분석기에 의한 품질검사 로그 정보를 분석하는 단계,

    웹 서버에 의한 웹 브라우저를 통해 의뢰자에게 품질검사 결과를 제공하는 단계, 및

    정산 관리자에 의해 사용된 비용이 정산되고 그 결과가 의뢰자와 테스터에게 제공되는 단계를 포함하여 이루어지는 것을 특징으로 하는 스마트폰 어플리케이션 사용자를 대상으로 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 품질검사 방법.
KR1020150021712A 2015-02-12 2015-02-12 스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 qa 시스템 및 이를 이용한 qa 방법 KR20160099778A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150021712A KR20160099778A (ko) 2015-02-12 2015-02-12 스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 qa 시스템 및 이를 이용한 qa 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150021712A KR20160099778A (ko) 2015-02-12 2015-02-12 스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 qa 시스템 및 이를 이용한 qa 방법

Publications (1)

Publication Number Publication Date
KR20160099778A true KR20160099778A (ko) 2016-08-23

Family

ID=56875213

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150021712A KR20160099778A (ko) 2015-02-12 2015-02-12 스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 qa 시스템 및 이를 이용한 qa 방법

Country Status (1)

Country Link
KR (1) KR20160099778A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190051436A (ko) 2017-11-07 2019-05-15 엔에이치엔 주식회사 어플리케이션 사용환경 설정방법 및 이를 이용한 테스트방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190051436A (ko) 2017-11-07 2019-05-15 엔에이치엔 주식회사 어플리케이션 사용환경 설정방법 및 이를 이용한 테스트방법

Similar Documents

Publication Publication Date Title
US8621434B2 (en) System and method for distributed software testing
Zou et al. How practitioners perceive automated bug report management techniques
Joorabchi et al. Real challenges in mobile app development
Molyneaux The art of application performance testing: from strategy to tools
US20130283296A1 (en) Method and system for generating a service definition based on service activity events
CN111831573B (zh) 代码分支覆盖情况的确定方法、装置、计算机系统和介质
US20160246706A1 (en) Generating test cases
US20130111272A1 (en) Fault detection based on diagnostic history
US9122803B1 (en) Collaborative software defect detection
US20200226054A1 (en) Determining Reviewers for Software Inspection
de Souza et al. An IoT-based scenario description inspection technique
Peixoto et al. The importance of the use of an estimation process
US20130117005A1 (en) Coverage analysis for multiple test methodologies
Korenromp et al. The Spectrum-STI Groups model: syphilis prevalence trends across high-risk and lower-risk populations in Yunnan, China
KR20160099778A (ko) 스마트폰 사용자를 대상으로 다수의 테스터를 공개 모집하여 스마트폰 어플리케이션의 품질을 검사하는 스마트폰 어플리케이션의 개방형 qa 시스템 및 이를 이용한 qa 방법
CN112306857A (zh) 用于测试应用的方法和装置
CN115052037B (zh) 客户端检测方法、装置、存储介质和设备
Palvannan et al. Suggestion bot: analyzing the impact of automated suggested changes on code reviews
KR101808953B1 (ko) 다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법
US10795805B2 (en) Performance engineering platform and metric management
KR20180016069A (ko) 일반인을 크라우드 시험자로 활용하여 앱을 시험하는 실시간 앱 시험팀 구성과 시험 방법
Axinte et al. Improving the Quality of Web Applications Through Targeted Usability Enhancements
Lima et al. Unveiling Practitioners Awareness of Android Apps Regression Testing through an Expert Survey
Naith et al. The key considerations in building a crowd-testing platform for software developers
Naith Thesis title: Crowdsourced Testing Approach For Mobile Compatibility Testing

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination