KR101808953B1 - 다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법 - Google Patents

다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법 Download PDF

Info

Publication number
KR101808953B1
KR101808953B1 KR1020160100049A KR20160100049A KR101808953B1 KR 101808953 B1 KR101808953 B1 KR 101808953B1 KR 1020160100049 A KR1020160100049 A KR 1020160100049A KR 20160100049 A KR20160100049 A KR 20160100049A KR 101808953 B1 KR101808953 B1 KR 101808953B1
Authority
KR
South Korea
Prior art keywords
tester
memory
matching
application program
quality
Prior art date
Application number
KR1020160100049A
Other languages
English (en)
Inventor
임영환
김종근
심근정
심근호
심근수
양진현
림빈
Original Assignee
주식회사 세븐지엔씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 세븐지엔씨 filed Critical 주식회사 세븐지엔씨
Priority to KR1020160100049A priority Critical patent/KR101808953B1/ko
Application granted granted Critical
Publication of KR101808953B1 publication Critical patent/KR101808953B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06395—Quality analysis or management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311—Scheduling, planning or task assignment for a person or group
    • G06Q10/063112—Skill-based matching of a person or a group to a task
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311—Scheduling, planning or task assignment for a person or group
    • G06Q10/063118—Staff planning in a project environment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/105—Human resources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207—Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0226—Incentive systems for frequent usage, e.g. frequent flyer miles programs or point systems

Landscapes

  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Marketing (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • Operations Research (AREA)
  • Game Theory and Decision Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

어플리케이션 프로그램의 품질 검사 서버 및 방법이 개시된다. 개시된 어플리케이션 프로그램의 품질 검사 서버는 테스터의 단말장치와 통신을 수행하기 위한 통신부; 및 상기 통신부와 연동하여 동작하며, 상기 복수의 테스터 중 상기 의뢰자가 제작한 어플리케이션 프로그램에 참여할 복수의 참여 테스터를 모집하고, 상기 모집이 완료된 경우 상기 모집된 복수의 참여 테스터를 통해 상기 어플리케이션 프로그램의 품질 검사를 수행하는 제어부;를 포함한다.

Description

다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법{QUALITY ASSURANCE SERVER THROUGH PLURALITY OF END USER AND METHOD OF APPLICATION PROGRAM}
본 발명의 일 실시예들은 실제로 어플리케이션 프로그램을 사용하는 다수의 일반 사용자들이 어플리케이션 프로그램의 품질 검사(quality assurance)에 참여함으로써 저렴한 비용으로 어플리케이션 프로그램의 품질 검사를 수행할 수 있으며, 이와 함께 어플리케이션 프로그램의 광고 효과는 얻을 수 있는 어플리케이션 프로그램의 품질 검사 서버 및 방법에 관한 것이다.
스마트 기기(스마트 폰, 태블릿 PC 등)의 어플리케이션 프로그램(모바일 앱)이 처음 등장한 이후, 경쟁이 심해지고 있으며, 어플리케이션 프로그램 개발의 혁신요소가 '아이디어' 중심에서 '사용성 편이와 품질 위주'로 변화하고 있다.
즉, 1세대의 어플리케이션 프로그램은 주로 스마트 기기에서 단독으로 동작하며, 새로운 아이디어가 성공의 핵심 요소였었다. 2세대의 어플리케이션 프로그램의 경우, 좋은 아이디어만 가지고는 성공하는 것이 어려워지고 홍보를 통해 초기 사용자를 확보하는 것이 중요해졌다. 최근의 3세대의 어플리케이션 프로그램은 경쟁이 치열해짐에 따라 아이디어가 좋고 홍보를 잘 하면서도 완벽하게 동작하는 어플리케이션 프로그램을 만들어서 출시하는 것이 필수화가 되었다.
따라서, 현재 및 향후에는 개발된 어플리케이션 프로그램을 철저하게 검증한 후에 시장에 출시해야 하는 상황이 되었으며, 이를 위해서는 품질 검사(QA: Quality Assurance) 과정이 중요한 역할을 담당한다. 어플리케이션 프로그램에 대한 품질 검사 과정을 수행하기 위해서는 일반적으로 품질 검사 팀을 운영하며, 품질을 검사하기 위한 장비 예를 들어, 다수의 종류의 스마트 기기를 구매하여야 한다.
그러나, 현재 국내에서 출시되어 있는 스마트폰의 종류는 260 여 개가 넘으며, 이들 모두를 구매하여 품질 검사를 진행할 수 있는 회사나 개발자는 많지 않다.
상기의 이유로 일정 규모 이상의 회사들은 자체의 품질 검사 팀을 운영함으로써, 배포하는 어플리케이션 프로그램의 품질을 평가하고 개선하는 것이 가능할 수 있지만, 중소 기업 또는 개인 개발자들은 이러한 자체 품질 검사 팀과 시험 장비를 운영하기가 불가능한 단점이 있다. 또한, 개발 단계에서 어플리케이션 프로그램을 시험하는 단계가 완료되고 시장에 출시하기 이전의 상황인 경우, 시간적인 제한으로 인해 별도의 어플리케이션 프로그램의 품질 검사 팀을 정규직으로 구성하는 것이 어렵다.
한편, 일반 사용자들을 이용하여 어플리케이션 프로그램의 품질을 검사 내지 시험하는 클라우드 테스트가 시도되고 있다. 그러나, 이는 다음과 같은 문제점이 있다.
먼저, 일반 사용자를 테스터(taster)로 참여하도록 모집하여 테스트 의뢰자가 원하는 품질 테스트를 요청하면 테스트 결과를 받아보는 형식으로 진행되는데, 이 경우 테스트 결과를 받아보는데 너무 많은 시간이 소요된다는 문제점이 있다. 그리고, 테스트 의뢰자가 테스터에 대한 직접 소통을 할 수 없으므로 상호 대화가 어려운 단점이 있다.
다음으로, 테스트 의뢰자는 E-MAIL을 통해 시험할 항목을 테스터 그룹에 요청하고 이 요청을 받은 테스터들이 테스트 결과를 전송하되, 모든 테스트 결과가 아닌 선착순으로 받은 테스트 결과 만이 품질 검사에 사용된다. 그러나, 이러한 방법은 테스터들의 채택율이 떨어지기 때문에, 채택이 되지 않는 테스터들은 차후 테스트에는 참여하지 않으려는 경향이 있어 클라우드 테스트가 지속되기 어려운 문제가 있다.
어플리케이션 프로그램을 직접 사용하는 일반인들을 대상으로 하는 클라우드 테스터 기법에서 가장 중요한 사항은 테스트 의뢰자가 자신이 원하는 테스터를 어떻게 실시간으로 모집하고 모집된 테스터과 어떻게 상호 소통을 하면서 품질 테스트를 진행하는지의 여부이다.
따라서, 본 발명은 테스트 의뢰자가 원하는 시간에 원하는 테스트 팀을 구성하는 기술 및 상호 소통을 통해 품질 검사을 요청하고 결과를 받을 수 있게 하는 어플리케이션 프로그램의 품질 검사 서버 및 방법을 제한하고자 한다.
또한, 본 발명은 다수의 일반 사용자들이 어플리케이션 프로그램의 품질 검사(quality assurance)에 참여하여 저렴한 비용으로 어플리케이션 프로그램의 품질 검사를 수행할 수 있는 어플리케이션 프로그램의 품질 검사 서버 및 방법을 제안하고자 한다.
본 발명의 다른 목적들은 하기의 실시예를 통해 당업자에 의해 도출될 수 있을 것이다.
상기한 목적을 달성하기 위해 본 발명의 바람직한 일 실시예에 따르면, 의뢰자의 단말장치 및 데이터베이스에 저장된 테스터 풀에 속하는 복수의 테스터의 단말장치와 통신을 수행하기 위한 통신부; 및 상기 통신부와 연동하여 동작하며, 상기 복수의 테스터 중 상기 의뢰자가 제작한 어플리케이션 프로그램에 참여할 복수의 참여 테스터를 모집하고, 상기 모집이 완료된 경우 상기 모집된 복수의 참여 테스터를 통해 상기 어플리케이션 프로그램의 품질 검사를 수행하는 제어부;를 포함하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사를 위한 서버가 제공된다.
상기 제어부는 상기 의뢰자의 단말장치에서 수신된 상기 어플리케이션 프로그램에 대한 품질 검사 의뢰 메시지에 기초하여 상기 적어도 하나의 매칭 테스터를 검색하고, 상기 적어도 하나의 매칭 테스터를 이용하여 상기 복수의 참여 테스터를 모집하되, 상기 품질 검사 의뢰 메시지는 품질 검사 내용 정보, 테스터의 자격 정보, 및 최소값과 최대값을 포함하는 테스터의 인원 정보를 포함할 수 있다.
상기 데이터베이스에는 상기 복수의 테스터의 개인 정보가 저장되어 있고, 상기 제어부는 상기 복수의 테스터 중 상기 테스터의 자격 정보와 대응되는 상기 개인 정보를 가지는 적어도 하나의 매칭 테스터를 검색하고, 상기 검색된 적어도 하나의 매칭 테스터를 상기 제어부 내의 제1 메모리에 저장하며, 상기 제1 메모리에 저장된 매칭 테스터와 상기 테스터의 인원 정보를 기초로 상기 참여 테스터를 모집할 수 있다.
상기 제어부는 상기 선택된 적어도 하나의 매칭 테스터를 참여 마일리지 순서로 상기 제1 메모리에 저장하되, 상기 참여 마일리지는 종래의 다른 어플리케이션 프로그램의 품질 검사의 참여에 의해 적립될 수 있다.
상기 제1 메모리에 저장된 매칭 테스터의 수가 상기 최대값 이상인 경우, 상기 제어부는 상기 제1 메모리에 저장된 매칭 테스터 중 상기 최대값와 동일한 수의 매칭 테스터를 상기 제1 메모리의 저장 순서대로 선별하고, 상기 통신부는, 품질 검사 참여 메시지를 상기 선별된 매칭 테스터의 단말장치로 전송하고, 상기 선별된 매칭 테스터 중 적어도 일부의 단말장치로부터 품질 검사 동의 메시지를 기 설정된 기간 동안 수신하고, 상기 제어부는, 상기 품질 검사 동의 메시지를 전송한 매칭 테스터를 상기 제어부 내의 제2 메모리에 저장하고, 상기 제1 메모리에서 상기 선별된 매칭 테스터를 삭제하여 업데이트하며, 상기 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값과 동일한 경우 상기 제2 메모리에 저장된 매칭 테스터를 상기 참여 테스터로 모집할 수 있다.
상기 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 미만이고, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터가 존재하되 상기 최대값 미만인 경우, 상기 통신부는, 상기 품질 검사 참여 메시지를 상기 업데이트된 제1 메모리에 저장된 매칭 테스터 모두의 단말장치로 전송하고, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터 중 적어도 일부로부터 품질 검사 동의 메시지를 수신하며, 상기 제어부는, 상기 품질 검사 동의 메시지를 전송한 매칭 테스터를 상기 제2 메모리에 더 저장하여 업데이트하되, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 이상인 경우, 상기 품질 검사 동의 메시지의 전송 시간에 기준한 선착순으로 상기 업데이트된 제2 메모리에 저장된 매칭 테스터 중 상기 최대값과 동일한 수의 매칭 테스터를 선택하여 상기 참여 테스터로 모집하고, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터의 수가 상기 최소값 이상 상기 최대값 미만인 경우, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터를 전체를 상기 참여 테스터로 모집할 수 있다.
상기 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 미만이고, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터가 존재하되 상기 최대값 이상인 경우, 상기 제어부는, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터 중 상기 최대값와 동일한 수의 매칭 테스터를 상기 업데이트된 제1 메모리의 저장 순서대로 선별하고, 상기 통신부는, 상기 품질 검사 참여 메시지를 상기 선별된 매칭 테스터의 단말장치로 전송하고, 상기 선별된 매칭 테스터 중 적어도 일부의 단말장치로부터 상기 품질 검사 동의 메시지를 기 설정된 기간 동안 수신하고, 상기 제어부는, 상기 품질 검사 동의 메시지를 전송한 매칭 테스터를 상기 제2 메모리에 더 저장하고, 상기 업데이트된 제1 메모리에서 상기 선별된 매칭 테스터를 삭제하여 업데이트하며, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 이상인 경우 상기 품질 검사 동의 메시지의 전송 시간에 기준한 선착순으로 상기 업데이트된 제2 메모리에 저장된 매칭 테스터 중 상기 최대값과 동일한 수의 매칭 테스터를 선택하여 상기 참여 테스터로 모집할 수 있다.
상기 통신부는 상기 복수의 참여 테스터가 모집되었음을 알리는 품질 검사 그룹 생성 메시지를 상기 의뢰자의 단말장치 및 상기 복수의 참여 테스터의 단말장치로 전송하고, 상기 의뢰자의 단말장치에서 전송된 상기 어플리케이션 프로그램을 수신하고, 상기 제어부는 로그 분석을 위한 라이브러리 파일을 상기 어플리케이션 프로그램에 삽입하고, 상기 통신부는 상기 라이브러리 파일이 삽입된 어플리케이션 프로그램을 상기 복수의 참여 테스터의 단말장치로 전송할 수 있다.
상기 삽입된 어플리케이션 프로그램은 상기 복수의 참여 테스터의 단말장치에서 실행되어 로그 데이터를 수집하고, 상기 통신부는 상기 복수의 참여 테스터의 단말장치로부터 상기 수집된 로그 데이터를 수신하되, 상기 로그 데이터는 함수 호출 정보 및 상기 품질 검사 그룹에 속하는 테스터의 단말 장치 각각에 대한 하드웨어 정보를 포함하고 상기 제어부는 상기 로그 데이터를 분석하여 품질 검사 결과를 생성할 수 있다.
또한, 본 발명이 다른 실시예에 따르면, 프로세서가 포함된 장치에서 수행되는 어플리케이션 프로그램의 품질 검사 방법에 있어서, 데이터베이스에 저장된 테스터 풀에 속하는 복수의 테스터 중 상기 의뢰자가 제작한 어플리케이션 프로그램에 참여할 복수의 참여 테스터를 모집하는 단계 (A); 및 상기 모집이 완료된 경우 상기 모집된 복수의 참여 테스터를 통해 상기 어플리케이션 프로그램의 품질 검사를 수행하는 단계 (B);를 포함하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사 방법이 제공된다.
본 발명에 따르면, 테스트 의뢰자가 원하는 시간에 원하는 테스트 팀을 구성하는 기술 및 상호 소통을 통해 품질 검사을 요청하고 결과를 받을 수 있는 장점이 있다.
또한, 본 발명에 따르면, 다수의 일반 사용자들이 어플리케이션 프로그램의 품질 검사(quality assurance)에 참여하여 저렴한 비용으로 어플리케이션 프로그램의 품질 검사를 수행할 수 있으며, 어플리케이션 프로그램의 광고 효과는 얻을 수 있는 장점이 있다.
도 1은 본 발명의 일 실시예에 따른 어플리케이션 프로그램의 품질 검사 시스템의 개략적인 구성을 도시한 도면이다.
도 2에서는 본 발명의 일 실시예에 따른 품질 검사 서버(120)의 개략적인 구성의 일례를 도시한 도면이다.
도 3은 본 발명의 일 실시예에 따른 품질 검사 서버의 동작(즉, 품질 검사 방법)의 흐름도를 도시한 도면이다.
도 4 및 도 5는 본 발명의 일 실시예에 따른 품질 검사 서버의 동작 중 제1 동작의 상세한 흐름을 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 제2 동작의 상세한 흐름을 도시한 도면이다.
본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
이하, 본 발명의 다양한 실시예들을 첨부된 도면을 참조하여 상술한다.
도 1은 본 발명의 일 실시예에 따른 어플리케이션 프로그램의 품질 검사 시스템의 개략적인 구성을 도시한 도면이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 품질 검사 시스템(100)는 의뢰자의 단말장치(110), 품질 검사 서버(120) 및 복수의 테스터(tester)의 단말장치(130)를 포함한다. 이하, 각 구성 요소 별로 그 기능을 설명한다.
의뢰자의 단말장치(110)는 어플리케이션 프로그램을 제작하는 사용자인 의뢰자가 소지한 단말장치를 의미한다. 하기에서 설명하는 바와 같이, 의뢰자의 단말장치(110)는 품질 검사 서버(120)로 어플리케이션 프로그램에 대한 품질 검사를 요청한다.
이 때, 의뢰자는 적어도 하나의 사용자가 포함되는 회사 내지 상기 회사에 포함된 CEO, 기획자 또는 실제 개발자일 수도 있으며, 의뢰자의 단말장치(110)는 데스크탑 컴퓨터, 노트북, PDA, 모바일 단말장치(스마트 폰, 태블릿 PC) 등을 포함하는 마이크로 프로세서 기반의 장치를 통칭하는 개념이다.
복수의 테스터의 단말장치(130)는 품질 검사를 수행하기 위한 테스터 풀에 포함되는 사용자(테스터)들이 소지하는 단말장치를 의미한다. 즉, 사용자는 품질 관리 회사 등에 고용되지 않으며, 스마트폰 등의 단말장치를 소지하고 있는 실제적인 일반 사용자로서, 품질 검사 참여를 수행하기 위해 아래에서 설명하는 품질 검사 서버(120)에 등록한 사용자이다. 따라서, 복수의 테스터 각각은 다양한 종류의 단말장치를 소지하고 있다.
품질 검사 서버(120)는 프로세서를 포함하며, 의뢰자로부터 어플리케이션 프로그램의 품질 검사를 요청받고, 어플리케이션 프로그램의 품질 검사를 수행할 테스터들을 모집하는 역할을 수행한다. 또한, 품질 검사 서버(120)는 모집이 완료된 경우 모집된 복수의 테스터를 통해 어플리케이션 프로그램의 품질 검사를 실시간으로 수행한다. 이 때, 품질 검사 서버(120)는 통신부(121), 제어부(122) 및 데이터베이스(123)를 포함한다.
통신부(121)은 의뢰자의 단말장치(110) 및 아래에서 설명하는 데이터베이스(123)에 저장된 테스터 풀에 속하는 복수의 테스터의 단말장치(130)와 통신 연결을 수행한다. 일례로, 통신부(121)는 수신부 및 전송부를 포함하며, 수신부는 의뢰자의 단말장치(110)와 관련된 제1 수신 모듈 및 복수의 테스터의 단말장치(130)와 관련된 제2 수신 모듈로 구성되며, 전송부는 의뢰자의 단말장치(110)와 관련된 제1 전송 모듈 및 복수의 테스터의 단말장치(130)와 관련된 제2 전송 모듈로 구성될 수 있다.
그리고, 제어부(122)는 품질 검사를 수행하기 위한 핵심적인 기능 즉, 품질 검사에 참여할 복수의 참여 테스터의 모집 기능 및 모집된 복수의 참여 테스터를 통해 어플리케이션 프로그램의 품질 검사를 수행한다.
도 2에서는 본 발명의 일 실시예에 따른 품질 검사 서버(120)의 개략적인 구성의 일례를 도시하고 있다.
웹 서버(210)는 웹 브라우저를 통해 의뢰자의 등록 및 접속, 어플리케이션 프로그램의 품질 검사 신청, 품질 검사 결과 보기, 정산 서비스를 제공하는 기능을 수행하며, 상기의 제1 수신 모듈 및 제1 전송 모듈과 대응될 수 있다.
API 서버(220)는 복수의 테스터의 단말장치(130)에 설치되어 있는 어플리케이션 프로그램을 통해 테스터의 등록 및 접속, 품질 검사 참여, 정보 보기, 정보 알람(일례로, 푸시 메시지), 정산 서비스를 제공하는 기능을 수행하며, 상기의 제2 수신 모듈 및 제2 전송 모듈과 대응될 수 있다.
Info DB(230)는 의뢰자의 정보, 품질 검사를 진행하고 있는 프로젝트의 정보, 테스터 그룹의 목록, 테스터의 정보, 테스터의 장비 목록, 정산 결과, 품질 검사 결과 정보를 저장하고 있으며, 상기의 데이터베이스(123)와 대응될 수 있다.
메시지큐(240)는 테스터가 품질 검사를 진행하는 중에 발생되는 모든 테스트 로그, 에러 로그를 받아서 로그 DB(250)에 기록하며, 로그 분석기(260)는 로그 DB(250)에 기록되어 있는 테스트 로그를 분석하여 품질 검사 결과를 Info DB(230)에 기록하며, 정산 관리자(270)는 품질 검사 신청 정보 및 테스터의 참여 정보와 품질 검사 결과를 분석하여 의뢰자와 테스터의 비용을 각각 계산하여 Info DB(230)에 기록하며, 이는 상기의 제어부(122)와 대응될 수 있다.
이하, 도 3을 참조하여, 본 발명의 일 실시예에 따른 품질 검사 서버(120)의 동작 즉, 품질 검사 방법에 대해 상세하게 설명하기로 한다.
도 3은 본 발명의 일 실시예에 따른 품질 검사 서버(120)의 동작(즉, 품질 검사 방법)의 흐름도를 도시한 도면이다. 이하, 각 단계 별로 수행되는 과정을 설명하기로 한다.
단계(300)에서는 테스터 풀에 속하는 복수의 테스터 중 의뢰자가 제작한 어플리케이션 프로그램에 참여할 복수의 참여 테스터를 모집하는 제1 동작을 수행한다.
도 4 및 도 5는 본 발명의 일 실시예에 따른 제1 동작의 상세한 흐름을 도시한 도면이다.
이 때, 데이터베이스(123)에는 품질 검사 서버(120)에 등록한 복수의 테스터의 개인 정보가 저장되어 있는 것으로 가정한다. 여기서, 테스터의 개인 정보는 테스터의 단말장치의 정보(일례로, OS 유형, 제조사, 단말기기의 종류, 해상도 등)를 포함하며, 나이 정보, 성별 정보, 지역 정보, 직업 정보 중 적어도 하나를 더 포함할 수 있다. 또한, "메시지"은 문자 메시지, SNS 메시지 및 어플리케이션 프로그램의 푸시 메시지 등일 수 있다.
먼저, 도 4를 참조하면, 단계(302)에서, 통신부(121)는 의뢰자가 제작한 어플리케이션 프로그램에 대한 품질 검사 의뢰 메시지를 의뢰자의 단말장치(110)로부터 수신한다.
본 발명의 일 실시예에 따르면, 품질 검사 의뢰 메시지는 품질 검사 내용 정보, 원하는 테스터의 자격 정보 및 포함하는 테스터의 인원 정보를 포함할 수 있다.
여기서, 품질 검사 내용 정보는 품질 검사 내용 설명, 품질 검사 시작 일시, 품질 검사 기간, 1일 최대 작업 요청 횟수 중 적어도 하나를 포함할 수 있다. 그리고, 테스터의 자격 정보는 테스터의 개인 정보와 유사하게 테스터의 단말장치의 정보(일례로, OS 유형, 제조사, 단말기기의 종류, 해상도 등)을 포함하며, 나이 정보, 성별 정보, 지역 정보, 직업 정보 중 적어도 하나를 더 포함할 수 있다. 또한, 테스터의 인원 정보는 테스터를 수행하고자 하는 인원수로서, 최소값과 최대값을 포함할 수 있다.
단계(304)에서, 제어부(122)는 품질 검사 의뢰 메시지에 기초하여 적어도 하나의 매칭 테스터를 검색한다. 즉, 제어부(122)는 복수의 테스터 중 품질 검사 의뢰 메시지 내의 테스터의 자격 정보와 대응되는 개인 정보를 가지는 적어도 하나의 매칭 테스터를 검색한다.
단계(306)에서, 제어부(122)는 선택된 적어도 하나의 매칭 테스터를 제어부(122) 내부의 제1 메모리에 저장한다.
본 발명의 일 실시예에 따르면, 제어부(122)는 선택된 적어도 하나의 매칭 테스터를 참여 마일리지 순서로 제1 메모리에 저장할 수 있다. 여기서, 테스터의 참여 마일리지는 종래의 다른 어플리케이션 프로그램의 품질 검사의 참여에 의해 적립되는 것으로서, 참여 열성도와 대응되는 개념일 수 있다. 이는 참여 열성도가 높은 테스터에게 먼저 품질 검사의 기회를 주기 위함이다. 따라서, 테스터들은 열성적으로 품질 검사에 참여할 수 있다.
한편, 단계(308) 내지 단계(340)는 제어부(122)가 적어도 하나의 매칭 테스터를 이용하여 복수의 참여 테스터를 모집하는 과정을 설명하고 있다. 즉, 단계(308) 내지 단계(340)에서는 제1 메모리에 저장된 매칭 테스터와 테스터의 인원 정보를 기초로 참여 테스터를 모집할 수 있다.
세부적으로, 단계(308)에서, 제어부(122)는 제1 메모리에 저장된 매칭 테스터의 수와 품질 검사 의뢰 메시지 내의 테스터의 최소값/최대값을 비교한다. 단계(308)의 결과로 3가지의 case가 발생할 수 있다.
1. case a
제1 메모리에 저장된 매칭 테스터의 수가 최소값 미만인 경우, 단계(310)에서 제어부(122)는 참여 테스터의 모집을 포기한다. 즉, 검색된 매칭 테스터가 의뢰자가 요구한 참여 테스터의 최소값 미만이므로, 제어부(122)는 모집이 실패한 것으로 판단한다. 이 때, 통신부(121)를 통해 모집 실패 메시지가 의뢰자의 단말장치(110)로 전송될 수 있다.
2. case b
제1 메모리에 저장된 매칭 테스터의 수가 최소값 이상이고 최대값 미만인 경우, 단계(312)에서 통신부(121)는 제1 메모리에 저장된 매칭 테스터 모두의 단말장치로 품질 검사 참여 메시지를 전송한다. 이 때, 품질 검사 참여 메시지에는 품질 검사 내용 정보가 포함될 수 있다. 제1 메모리에 저장된 매칭 테스터 각각은 품질 검사 참여 메시지에 기초하여 품질 검사에 참여할 지 여부를 결정한다.
그리고, 단계(314)에서 통신부(121)는 제1 메모리에 저장된 매칭 테스터 중 참여를 동의한 적어도 일부로부터 품질 검사 동의 메시지를 수신한다. 그 후, 단계(316)에서 제어부(122)는 참여를 동의한 적어도 일부의 테스터의 수와 최소값을 비교한다.
만약, 참여를 동의한 적어도 일부의 수가 최소값 미만인 경우 단계(310)에서 제어부(122)는 참여 테스터의 모집이 실패한 것으로 판단한다.
반대로, 참여를 동의한 적어도 일부의 수가 최소값 이상인 경우 단계(318)에서 제어부(122)는 모집이 성공한 것으로 판단한다. 즉, 참여를 동의한 적어도 일부의 테스터가 최소값 이상이므로, 참여를 동의한 적어도 일부 참여 테스터로 모집한다. 이 때, 통신부(121)를 통해 모집 성공 메시지가 의뢰자의 단말장치(110)로 전송될 수 있다.
3. case c
도 5는 case c의 상세한 흐름을 도시한 도면이다.
도 5를 참조하면, 제1 메모리에 저장된 매칭 테스터의 수가 최대값 이상인 경우, 단계(320)에서, 제어부(122)는 제1 메모리에 저장된 매칭 테스터 중 최대값과 동일한 수의 매칭 테스터를 제1 메모리의 저장 순서대로, 참여 마일리지의 순서대로 선별한다. 따라서, 참여 마일리지가 높은 최대값의 수의 매칭 테스터가 선별된다.
그 후, 단계(322)에서 통신부(121)는 선별된 매칭 테스터의 단말장치로 품질 검사 참여 메시지를 전송한다. 그리고, 단계(324)에서 통신부(121)는 선별된 매칭 테스터 중 참여를 동의한 적어도 일부로부터 품질 검사 동의 메시지를 수신한다. 이 때, 통신부(121)는 기 설정된 기간(일례로, 10분) 동안 품질 검사 동의 메시지를 수신할 수 있다.
그 후, 단계(326)에서 제어부(122)는 품질 검사 동의 메시지를 전송한 매칭 테스터(즉, 참여를 동의한 매칭 테스터)를 제어부(122) 내의 제2 메모리에 저장하고, 제1 메모리에서 품질 검사 참여 메시지를 전송한 매칭 테스터(상기 선별된 테스터)를 삭제하여 업데이트한다. 일례로, 제1 메모리에 30명의 매칭 테스터가 있고, 10명의 매칭 테스터에게 품질 검사 참여 메시지를 전송하고, 8명의 매칭 테스터에게 품질 검사 동의 메시지를 받은 경우, 단계(324)에서는 8명의 매칭 테스터를 제2 메모리에 저장하고, 제1 메모리에 저장된 30명의 테스터 중 10명을 삭제한다. 이 경우, 20명의 테스터가 제1 메모리에 저장되어 있다.
다음으로, 단계(328)에서, 제어부(122)는 제2 메모리에 저장된 매칭 테스터의 수가 최대값 이상인지를 판단한다.
만약, 제2 메모리에 저장된 매칭 테스터의 수가 최대값 이상인 경우, 즉, 모든 매칭 테스터가 품질 검사 동의 메시지를 전송한 경우, 최대값과 동일한 매칭 테스터가 모집되었으므로, 단계(330)에서 제어부(122)는 최대값과 동일한 참여 테스터의 모집이 성공한 것으로 판단한다. 이 때, 통신부(121)를 통해 모집 성공 메시지가 의뢰자의 단말장치(110)로 전송될 수 있다.
반대로, 제2 메모리에 저장된 매칭 테스터의 수가 최대값 미만인 경우, 단계(332)에서 제어부(122)는 업데이트된 제1 메모리에 저장된 매칭 테스터의 수를 파악한다. 단계(332)의 결과로 3가지의 상황이 발생할 수 있다.
가. case c1
업데이트된 제1 메모리에 저장된 매칭 테스터의 수가 존재하지 않는 경우, 단계(334)에서 제어부(122)는 제2 메모리에 저장된 매칭 테스터의 수를 파악한다. 이 때, 제2 메모리에 저장된 매칭 테스터의 수가 최소값 미만인 경우 제어부(122)는 참여 테스터의 모집이 실패한 것으로 판단하고, 제2 메모리에 저장된 매칭 테스터의 수가 최소값 이상인 경우 최소값 이상 최대값 미만의 참여 테스터의 모집이 성공한 것으로 판단한다.
나. case c2
업데이트된 제1 메모리에 저장된 매칭 테스터의 수가 존재하되 최대값 미만인 경우, 단계(336)에서 통신부(122)는 품질 검사 참여 메시지를 업데이트된 제1 메모리에 저장된 매칭 테스터 모두의 단말장치로 전송한다. 그리고, 단계(338)에서 통신부(122)는 업데이트된 제1 메모리에 저장된 매칭 테스터 중 적어도 일부로부터 품질 검사 동의 메시지를 수신한다. 이 때, 통신부(121)는 앞서 설명한 것과 같이 기 설정된 기간(일례로, 10분) 동안 품질 검사 동의 메시지를 수신할 수 있다. 그 후, 제어부(122)는 단계(340)에서 품질 검사 동의 메시지를 전송한 매칭 테스터(즉, 참여를 동의한 매칭 테스터)를 제어부(122) 내의 제2 메모리에 더 저장한다.
계속하여, 제어부(122)는 단계(334)에서 제2 메모리에 저장되어 있는 매칭 테스터의 수를 파악한다.
만약, 제2 저장부에 최소값 미만의 매칭 테스터가 존재하는 경우 제어부(122)는 참여 테스터의 모집이 실패한 것으로 판단한다. 그리고, 최소값 이상 최대값 미만의 매칭 테스터가 존재하는 경우 제어부(122)는 제2 메모리에 저장된 매칭 테스터 전체를 참여 테스터로 모집한다. 또한, 최대값 이상의 매칭 테스터가 존재하는 경우, 제어부(122)는 품질 검사 동의 메시지의 전송 시간에 기준한 선착순으로 업데이트된 제2 메모리에 저장된 매칭 테스터 중 최대값과 동일한 수의 매칭 테스터를 선택하여 참여 테스터로 모집한다.
다. case c3
업데이트된 제1 메모리에 저장된 매칭 테스터가 존재하되 최대값 이상인 경우, 제어부(122) 및 통신부(121)는 상기한 단계(320) 내지 단계(340)를 반복적으로 수행하여 참여 테스터를 모집한다.
다시 말해, 단계(320)에서, 제어부(122)는 업데이트된 제1 메모리에 저장된 매칭 테스터 중 최대값과 동일한 수의 매칭 테스터를 제1 메모리의 저장 순서대로 선별한다. 그리고, 통신부(121)는 단계(322)에서 품질 검사 참여 메시지를 선별된 매칭 테스터의 단말장치로 전송하고, 단계(324)에서 선별된 매칭 테스터 중 적어도 일부의 단말장치로부터 품질 검사 동의 메시지를 기 설정된 기간 동안 수신한다. 또한, 제어부(122)는 단계(326)에서 품질 검사 동의 메시지를 전송한 매칭 테스터를 제2 메모리에 더 저장하고, 업데이트된 제1 메모리에서 선별된 매칭 테스터를 삭제하여 업데이트하며, 단계(328)에서 업데이트된 제2 메모리에 저장된 매칭 테스터의 수가 최대값 이상인지를 판단한다. 만약, 제2 메모리에 저장된 매칭 테스터의 수가 최대값 이상인 경우, 제어부(122)는 품질 검사 동의 메시지의 전송 시간에 기준한 선착순으로 업데이트된 제2 메모리에 저장된 매칭 테스터 중 최대값과 동일한 수의 매칭 테스터를 선택하여 참여 테스터로 모집한다. 반대로, 제2 메모리에 저장된 매칭 테스터의 수가 최대값 미만인 경우, 단계(332)에서 제어부(122)는 업데이트된 제1 메모리에 저장된 매칭 테스터의 수를 파악한다. 이 결과 case c1, case c2 , case c3가 발생될 수 있다.
정리하면, 본 발명의 일 실시예에 따른 제어부(122)의 제1 동작, 즉 어플리케이션 프로그램에 참여할 복수의 참여 테스터를 모집하는 동작은 다음과 같은 장점을 가진다.
의뢰자의 테스트 팀 구성 요청을 받은 품질 검사 서버(120)의 입장에서 가장 중요한 것은 참여 테스터를 모집하는데 소요되는 시간이 기다릴 수 있는 시간으로 최소화되어야 한다는 점이다. 따라서, 본 발명은 일부 참가자들에게 품질 검사 의뢰 메시지를 전송하고, 기 설정된 시간(일례로 10분) 내에 품질 검사 동의 메시지를 보내지 않는 경우, 다음 참가자들에게 품질 검사 의뢰 메시지를 전송하며, 이 과정을 반복적으로 수행함으로써 참여 테스터를 모집한다. 따라서, 빠른 시간 내에 참여 테스터를 모집할 수 있다.
특히, 반복적으로 참여 테스터를 모집하는 과정에서 적은 수의 참여 테스터가 모집되지 않는 경우 본 발명에 따른 품질 검사 서버(120)가 효과적일 수 있다. 일례로, 최대값이 20명이라 제2 메모리 상에 18명만이 저장되어 있는 경우, 제1 저장부 내의 2명의 매칭 테스터에게 품질 검사 참여 메시지를 보내는 것이 아니라, 제1 저장부 내의 최대값인 20명의 매칭 테스터에게 품질 검사 참여 메시지를 전송하며, 2명 이상의 매칭 테스터가 품질 검사 동의 메시지를 보내는 경우 선착순으로 2명을 매칭 테스터를 모집한다. 따라서, 상기의 경우 역시 빠른 시간 내에 참여 테스터를 모집할 수 있다.
다시, 도 3을 참조하여 본 발명의 일 실시예에 따른 품질 검사 서버(120)의 나머지 동작을 설명하면 다음과 같다.
단계(300)을 통해 참여 테스터의 모집이 완료된 경우, 단계(400)에서는 모집된 복수의 참여 테스터를 통해 어플리케이션 프로그램의 품질 검사를 수행하는 제2 동작을 수행한다.
도 6은 본 발명의 일 실시예에 따른 제2 동작의 상세한 흐름을 도시한 도면이다. 이하, 각 단계 별로 수행되는 과정을 설명한다.
통신부(121)는, 단계(402)에서 복수의 참여 테스터가 모집되었음을 알리는 품질 검사 그룹 생성 메시지를 의뢰자의 단말장치(110) 및 복수의 참여 테스터의 단말장치로 전송하고, 단계(404)에서 의뢰자의 단말장치(110)에서 전송된 어플리케이션 프로그램을 수신한다.
그 후, 단계(406)에서, 제어부(122)는 어플리케이션 프로그램에 로그 분석을 위한 라이브러리 파일을 어플리케이션 프로그램에 삽입하고, 단계(408)에서 통신부(121)는 라이브러리 파일이 삽입된 어플리케이션 프로그램을 복수의 참여 테스터의 단말장치로 전송한다. 이 때, 삽입된 어플리케이션 프로그램은 복수의 참여 테스터의 단말장치에서 실행되며, 실행되는 과정에서 로그 데이터를 수집한다.
본 발명의 일 실시예에 따르면, 로그 데이터는 테스터 로그 및 에러 로그를 포함하며, 함수 호출 정보(호출된 시간 정보 포함) 및 품질 검사 그룹에 속하는 테스터의 단말장치 각각에 대한 하드웨어 정보를 포함할 수 있다. 이를 통해 에러가 나는 기종의 동작 상황 즉, 메모리 용량, 배터리 세기, 무선 통신 속도, 콜 접속, 이벤트 발생 등에 대한 정보를 수집할 수 있다.
계속하여, 단계(410)에서, 통신부(121)는 복수의 참여 테스터의 단말장치로부터 수집된 로그 데이터를 수신한다. 그리고, 단계(410)에서 통신부(121)는 복수의 참여 테스터가 작성한 사용 분석 메시지를 복수의 참여 테스터의 단말장치로부터 수신한다.
다음으로, 단계(412)에서, 제어부(122)는 로그 데이터 및 사용 분석 메시지를 분석하여 품질 검사 결과를 생성하고, 단계(414)에서 통신부(121)는 품질 검사 결과를 의뢰자의 단말장치(110)로 전송한다.
의뢰자는 결과를 확인하고 검토한 후 어플리케이션 프로그램을 수정하며, 그 후 수정된 어플리케이션 프로그램을 기초로 단계(402) 내지 단계(412)를 반복한다. 이와 같은 과정은 품질 검사가 완료될 때까지 반복적으로 수행될 수 있다. 그리고, 품질 검사가 완료되는 경우 품질 검사 서버(120)는 사용 비용을 정산하여 테스터에게 비용을 적립해주며 의뢰자와 테스터에게 정산 내용을 각각의 단말 장지로 제공한다.
요컨대, 본 발명에 따른 품질 검사 서버(120) 및 방법은 실제로 어플리케이션 프로그램을 사용하는 다수의 사용자들이 스마트폰 등에서 실행되는 어플리케이션 프로그램의 품질 검사에 직접 참여하게 함으로써, 품질 검사팀을 상시 운영하거나 시험 장비를 확보할 수 없는 스마트폰 어플리케이션 개발팀 또는 개발자에게 다양한 기종과 조건의 품질검사 환경을 제공한다. 따라서, 품질 검사가 필요한 개발팀에게는 어플리케이션 프로그램을 출시하기 이전에 이를 이용할 사용자의 직접적인 의견을 얻어 품질을 개선할 수 있다. 그리고, 품질 검사 서버(120) 및 방법은 선착순 기법을 통해 빠른 시간 내에 품질 검사 참여 테스트를 모집하는 장점이 있다.
또한, 시험이 필요한 시점에 단기간 활용할 수 있는 어플리케이션 프로그램의 검사팀을 실시간으로 구성하여 시험을 완료한 후 팀을 해체함으로 저렴한 비용으로 시험을 수행할 수 있을 뿐만 아니라 품질 검사를 수행하는 다수의 사용자들의 실제 기기에서의 어플리케이션 프로그램의 동작 결과를 수집하여 반영함으로 어플리케이션 프로그램의 기능적인 시험뿐만 아니라 사용자의 의견을 반영하여 사용성도 시험할 수 있기 때문에 어플리케이션 프로그램의 품질을 실제 사용자들의 눈에 맞게 향상시킬 수 있다.
그리고, 실제 사용자들이 마켓에 출시하기 이전에 미리 사용하고 의견을 제시한 것이라서 부가적으로 어플리케이션 프로그램의 광고 효과는 얻을 수 있는 장점도 있다.
또한 앞서 설명한 기술적 내용들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예들을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 하드웨어 장치는 실시예들의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.

Claims (10)

  1. 복수의 테스터의 개인 정보가 저장된 데이터베이스;
    의뢰자가 제작한 어플리케이션 프로그램에 대한 품질 검사 의뢰 메시지를 상기 의뢰자의 단말장치에서 수신하는 통신부 - 상기 품질 검사 의뢰 메시지는 품질 검사 내용 정보, 테스터의 자격 정보, 및 최소값과 최대값을 포함하는 테스터의 인원 정보를 포함함 -; 및
    상기 품질 검사 의뢰 메시지에 기초하여 상기 복수의 테스터 중 상기 어플리케이션 프로그램의 품질 검사에 참여할 복수의 참여 테스터를 모집하고, 상기 모집이 완료된 경우 상기 모집된 복수의 참여 테스터를 통해 상기 어플리케이션 프로그램의 품질 검사를 수행하는 제어부;를 포함하되,
    상기 제어부는, 상기 복수의 테스터 중에서 상기 테스터의 자격 정보와 대응되는 상기 개인 정보를 가지는 적어도 하나의 매칭 테스터를 검색하고, 상기 검색된 적어도 하나의 매칭 테스터를 종래의 다른 어플리케이션 프로그램의 품질 검사의 참여에 의해 적립되는 참여 마일리지의 순서로 상기 제어부 내의 제1 메모리에 저장하며, 상기 제1 메모리에 저장된 매칭 테스터의 저장 순서와 상기 테스터의 인원 정보를 기초로 하여 상기 복수의 참여 테스터를 모집하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사를 위한 서버.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 제1항에 있어서,
    상기 제1 메모리에 저장된 매칭 테스터의 수가 상기 최대값 이상인 경우,
    상기 제어부는 상기 제1 메모리에 저장된 매칭 테스터 중 상기 최대값와 동일한 수의 매칭 테스터를 상기 제1 메모리의 저장 순서대로 선별하고,
    상기 통신부는, 품질 검사 참여 메시지를 상기 선별된 매칭 테스터의 단말장치로 전송하고, 상기 선별된 매칭 테스터 중 적어도 일부의 단말장치로부터 품질 검사 동의 메시지를 기 설정된 기간 동안 수신하고,
    상기 제어부는, 상기 품질 검사 동의 메시지를 전송한 매칭 테스터를 상기 제어부 내의 제2 메모리에 저장하고, 상기 제1 메모리에서 상기 선별된 매칭 테스터를 삭제하여 업데이트하며, 상기 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값과 동일한 경우 상기 제2 메모리에 저장된 매칭 테스터를 상기 참여 테스터로 모집하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사를 위한 서버.
  6. 제5항에 있어서,
    상기 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 미만이고, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터가 존재하되 상기 최대값 미만인 경우,
    상기 통신부는, 상기 품질 검사 참여 메시지를 상기 업데이트된 제1 메모리에 저장된 매칭 테스터 모두의 단말장치로 전송하고, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터 중 적어도 일부로부터 품질 검사 동의 메시지를 수신하며,
    상기 제어부는, 상기 품질 검사 동의 메시지를 전송한 매칭 테스터를 상기 제2 메모리에 더 저장하여 업데이트하되, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 이상인 경우, 상기 품질 검사 동의 메시지의 전송 시간에 기준한 선착순으로 상기 업데이트된 제2 메모리에 저장된 매칭 테스터 중 상기 최대값과 동일한 수의 매칭 테스터를 선택하여 상기 참여 테스터로 모집하고, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터의 수가 상기 최소값 이상 상기 최대값 미만인 경우, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터를 전체를 상기 참여 테스터로 모집하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사를 위한 서버.
  7. 제5항에 있어서,
    상기 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 미만이고, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터가 존재하되 상기 최대값 이상인 경우,
    상기 제어부는, 상기 업데이트된 제1 메모리에 저장된 매칭 테스터 중 상기 최대값와 동일한 수의 매칭 테스터를 상기 업데이트된 제1 메모리의 저장 순서대로 선별하고,
    상기 통신부는, 상기 품질 검사 참여 메시지를 상기 선별된 매칭 테스터의 단말장치로 전송하고, 상기 선별된 매칭 테스터 중 적어도 일부의 단말장치로부터 상기 품질 검사 동의 메시지를 기 설정된 기간 동안 수신하고,
    상기 제어부는, 상기 품질 검사 동의 메시지를 전송한 매칭 테스터를 상기 제2 메모리에 더 저장하고, 상기 업데이트된 제1 메모리에서 상기 선별된 매칭 테스터를 삭제하여 업데이트하며, 상기 업데이트된 제2 메모리에 저장된 매칭 테스터의 수가 상기 최대값 이상인 경우 상기 품질 검사 동의 메시지의 전송 시간에 기준한 선착순으로 상기 업데이트된 제2 메모리에 저장된 매칭 테스터 중 상기 최대값과 동일한 수의 매칭 테스터를 선택하여 상기 참여 테스터로 모집하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사를 위한 서버.
  8. 제1항에 있어서,
    상기 통신부는 상기 복수의 참여 테스터가 모집되었음을 알리는 품질 검사 그룹 생성 메시지를 상기 의뢰자의 단말장치 및 상기 복수의 참여 테스터의 단말장치로 전송하고, 상기 의뢰자의 단말장치에서 전송된 상기 어플리케이션 프로그램을 수신하고,
    상기 제어부는 로그 분석을 위한 라이브러리 파일을 상기 어플리케이션 프로그램에 삽입하고,
    상기 통신부는 상기 라이브러리 파일이 삽입된 어플리케이션 프로그램을 상기 복수의 참여 테스터의 단말장치로 전송하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사를 위한 서버.
  9. 제8항에 있어서,
    상기 삽입된 어플리케이션 프로그램은 상기 복수의 참여 테스터의 단말장치에서 실행되어 로그 데이터를 수집하고, 상기 통신부는 상기 복수의 참여 테스터의 단말장치로부터 상기 수집된 로그 데이터를 수신하되, 상기 로그 데이터는 함수 호출 정보 및 상기 품질 검사 그룹에 속하는 테스터의 단말 장치 각각에 대한 하드웨어 정보를 포함하고
    상기 제어부는 상기 로그 데이터를 분석하여 품질 검사 결과를 생성하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사를 위한 서버.
  10. 데이터베이스 및 프로세서가 포함된 장치에서 수행되는 어플리케이션 프로그램의 품질 검사 방법에 있어서,
    의뢰자의 단말장치에서 수신된 상기 어플리케이션 프로그램에 대한 품질 검사 의뢰 메시지에 기초하여 복수의 테스터 중 상기 어플리케이션 프로그램의 품질 검사에 참여할 복수의 참여 테스터를 모집하는 단계 (A) - 상기 품질 검사 의뢰 메시지는 품질 검사 내용 정보, 테스터의 자격 정보, 및 최소값과 최대값을 포함하는 테스터의 인원 정보를 포함하고, 상기 데이터베이스에는 복수의 테스터의 개인 정보가 저장됨 -; 및
    상기 모집이 완료된 경우 상기 모집된 복수의 참여 테스터를 통해 상기 어플리케이션 프로그램의 품질 검사를 수행하는 단계 (B);를 포함하되,
    상기 단계 (A)는, 상기 복수의 테스터 중에서 상기 테스터의 자격 정보와 대응되는 상기 개인 정보를 가지는 적어도 하나의 매칭 테스터를 검색하고, 상기 검색된 적어도 하나의 매칭 테스터를 종래의 다른 어플리케이션 프로그램의 품질 검사의 참여에 의해 적립되는 참여 마일리지의 순서로 제어부 내의 제1 메모리에 저장하며, 상기 제1 메모리에 저장된 매칭 테스터의 저장 순서와 상기 테스터의 인원 정보를 기초로 하여 상기 복수의 참여 테스터를 모집하는 것을 특징으로 하는 어플리케이션 프로그램의 품질 검사 방법.
KR1020160100049A 2016-08-05 2016-08-05 다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법 KR101808953B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160100049A KR101808953B1 (ko) 2016-08-05 2016-08-05 다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160100049A KR101808953B1 (ko) 2016-08-05 2016-08-05 다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법

Publications (1)

Publication Number Publication Date
KR101808953B1 true KR101808953B1 (ko) 2018-01-18

Family

ID=61028640

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160100049A KR101808953B1 (ko) 2016-08-05 2016-08-05 다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법

Country Status (1)

Country Link
KR (1) KR101808953B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101996041B1 (ko) * 2018-11-08 2019-10-17 넷마블 주식회사 어플리케이션 오류에 대한 피드백 제공 방법 및 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101996041B1 (ko) * 2018-11-08 2019-10-17 넷마블 주식회사 어플리케이션 오류에 대한 피드백 제공 방법 및 장치

Similar Documents

Publication Publication Date Title
US9405662B2 (en) Process for displaying test coverage data during code reviews
CN111399873B (zh) 一种模型更新方法及装置
CN104618226B (zh) 一种信息处理方法、客户端和服务器
CN107885660B (zh) 基金系统自动化测试管理方法、装置、设备及存储介质
EP2572294B1 (en) System and method for sql performance assurance services
CN110378749B (zh) 客户端相似性的评估方法、装置、终端设备及存储介质
US20160378647A1 (en) Development supporting system
CN110569159A (zh) 挡板生成方法、装置、设备及计算机存储介质
US20160070555A1 (en) Automated tenant upgrades for multi-tenant services
US9823999B2 (en) Program lifecycle testing
US10949333B1 (en) Application maturity console
CN112650670A (zh) 应用测试方法、装置、系统、电子设备和存储介质
CN108847948B (zh) 活动群的创建方法及装置、介质和计算设备
KR101808953B1 (ko) 다수의 일반 사용자들을 통한 어플리케이션 프로그램의 품질 검사 서버 및 방법
US20210109750A1 (en) Code quality linked rewards
CN115022201B (zh) 一种数据处理功能测试方法、装置、设备及存储介质
CN112015715A (zh) 工业互联网数据管理服务测试方法及系统
CN110992166B (zh) 在线申请贷款的测试方法及装置
CN102053862B (zh) 一种即时通讯软件中的素材文件的检验方法和设备
Li et al. CoCoTest: Collaborative crowdsourced testing for Android applications
KR20180016069A (ko) 일반인을 크라우드 시험자로 활용하여 앱을 시험하는 실시간 앱 시험팀 구성과 시험 방법
CN115812195A (zh) 计算开发过程中的开发者时间
JP2001350650A (ja) ソフトウェアプログラム同等性検証方法及びソフトウェアプログラム同等性検証装置並びにその記録媒体
US9990274B2 (en) Testing integrated business systems
Shi et al. Lessons from Four Years of PHONELAB Experimentation

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant