KR100551454B1 - 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법 - Google Patents

서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법 Download PDF

Info

Publication number
KR100551454B1
KR100551454B1 KR1020050114921A KR20050114921A KR100551454B1 KR 100551454 B1 KR100551454 B1 KR 100551454B1 KR 1020050114921 A KR1020050114921 A KR 1020050114921A KR 20050114921 A KR20050114921 A KR 20050114921A KR 100551454 B1 KR100551454 B1 KR 100551454B1
Authority
KR
South Korea
Prior art keywords
performance measurement
server
performance
client
user client
Prior art date
Application number
KR1020050114921A
Other languages
English (en)
Inventor
김계관
Original Assignee
(주)그리드원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)그리드원 filed Critical (주)그리드원
Priority to KR1020050114921A priority Critical patent/KR100551454B1/ko
Application granted granted Critical
Publication of KR100551454B1 publication Critical patent/KR100551454B1/ko
Priority to PCT/KR2006/005049 priority patent/WO2007064129A1/en
Priority to US11/718,069 priority patent/US20090157864A1/en
Priority to CN2006800451902A priority patent/CN101322113B/zh
Priority to JP2008542251A priority patent/JP2009517734A/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/50Testing arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/22Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing

Abstract

본 발명은 성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계와, 성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계와, 성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계와, 선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계와, 선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계와, 성능 측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계로 이루어진 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법 및 그 서비스방법에 관한 것이다.
따라서, 본 발명은 실제 사용자의 요청에 의해 많은 문제점들이 발생될 수 있는 것을 현실적인 예상되는 사용자의 요청을 생성하여 성능을 측정함으로써 응용 시스템 개발 단계에서 시스템의 수용 용량 산정과 수행 로직 점검을 위한 도구로서 사용될 수 있으며, 시스템이 완료되어 운용하는 중에도 발생될 수 있는 문제점들을 사전에 예방하는 효과가 있고, 또한 문제점들을 사전에 예방함으로써 시행착오를 줄이고 시행착오로 인한 각종 경비를 절감하는 효과가 있다.
성능분석, 부하시험, 컴퓨터, 클라이언트, 그리드, 전산시스템, 소프트웨어, 하드웨어

Description

서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법 및 그 서비스방법 {Grid computing control method for testing application program capacity of server and service method there of}
도 1은 종래의 인터넷 서비스를 제공하는 구성도
도 2는 본 발명에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 시스템 구성도
도 3은 본 발명에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법 흐름도
도 4는 본 발명에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스 구성도
도 5는 본 발명에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법 흐름도
* 주요 도면부호에 대한 설명 *
10, 200, 210 : 사용자 클라이언트 20 : 라우터
30 : 게이트웨이 40, 100, 110 : 응용 서버
300, 310 : 성능측정 서버 400, 410 : 관리자 클라이언트
본 발명은 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법 및 그 서비스방법에 관한 것으로서, 더욱 상세하게는 서버의 응용프로그램 성능을 시험하기 위하여 시험 대상 응용 서버와, 인터넷상에서 그리드 기술에 의하여 연결된 수 많은 클라이언트들이 부하를 발생시켜 상기 서버의 응용프로그램을 분석하는 서비스를 제공하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법 및 그 서비스방법에 관한 것이다.
도 1은 종래의 인터넷 서비스를 제공 위한 구성도로서, 인터넷 서비스를 제공하기 위해서는 라우터(20), 게이트웨이(30), 응용 서버(40)로 구성된 전산시스템이 인터넷을 이용하여 사용자 클라이언트(10)에 서비스한다. 상기 전산시스템의 발전과 함께 시스템의 품질이 중요한 현안 사항으로 떠오르고 있고 또한 국가적 차원에서 시스템의 품질을 위해서 인증기관 및 시험센터에 적극적으로 지원하고 있는 실정이다.
이와 같은 종래의 기술은 하나의 클라이언트를 사용함에 따라 운영체제에서 생성될 수 있는 프로세스(Process)와, 스레드(Thread) 수의 한계로 인하여 가상사용자 생성에 제한이 있고, 운영체제의 프로세스, 스레드의 스케쥴링 방식에 의존하 기 때문에 실제 운용상태의 접속자에 대한 부하 및 각 지역별 네트워크 상황에 따른 실질적인 성능측정이 어려운 문제점이 있었다.
따라서, 본 발명은 상기 문제점을 해결하기 위하여 안출된 것으로 본 발명의 목적은 예상되는 실제 사용자 요청 부하를 생성하여 시험함으로써, 시스템 운용되면서 발생될 수 있는 많은 문제점을 사전에 도출하여 개발되는 시스템의 안정성을 보장할 수 있도록 한 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 시스템을 제공하는데 그 목적이 있다.
다른 목적은 사용되지 않는 시간에 클라이언트가 성능측정을 수행함으로써 상기 클라이언트 소유자에게 경제적 이득을 제공하는데 그 목적이 있다.
상기 목적을 달성하기 위한 본 발명의 일실시예에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법은 성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계와, 성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계와, 성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계와, 선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계와, 선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계와, 성능 측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계로 이루어는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 성능측정이 가능한 사용자 클라이언트를 선별하는 단계는 최초 측정하고자 하는 사용자 클라이언트 수보다 일정 개수 이상 사용자 클라이언트를 더 포함하여 성능측정 하는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 사용자 클라이언트는 개인용 PC 또는 소규모 네트워크가 형성된 개인용 PC가 사용되지 않는 시간대에서 성능측정에 활용되는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 사용자 클라이언트는 CPU, 메모리와 같은 시스템 사양이 우수하고 전원이 켜져 있는 시간이 긴 클라이언트와, 시험 참가 기여도가 우수한 클라이언트와 같이 시험의 특징에 따라 사용중인 클라이언트를 선별하여 성능측정에 활용되는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 사용자 클라이언트는 PC, PDA, 핸드폰, 인터넷 장치와 연산장치가 부착된 단말기 중 어느 하나로 성능측정하는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 성능측정 스크립트를 전송하는 단계는 실질적으로 운용 서버에 접속하여 운용 서버의 응용프로그램을 사용하는 것과 같은 시나리오가 스크립트에 포함되어 전송되는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 성능측정 데이터를 성능측정 서버에 전송하는 단계는 성능측정 서버와 사용자 클라이언트가 메시지 형식으로 성능측정 데이터가 교류되는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 성능측정 서버와 사용자 클라이언트는 메시지 형식으로 성능측정 데이터가 교류되는 것을 특징으로 한다.
본 발명의 일실시예에 따르면 상기 사용자 클라이언트는 그리드 기법에 의하여 성능측정 서버에 성능측정 데이터를 제공하는 것을 특징으로 한다.
본 발명의 다른 일실시예에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법은 기업 클라이언트가 성능측정 서버에 성능측정을 요청하는 단계와, 성능측정 서버가 상기 요청된 성능측정을 등록하는 단계와, 성능측정 서버가 등록된 성능측정에 대한 성능측정 스크립트와, 일정을 작성하여 기업 클라이언트에 전송하는 단계와, 성능측정 서버가 상기 작성된 스크립트와 일정에 의하여 성능측정을 요청한 응용서버의 성능을 측정하여 성능측정 데이터를 생성하는 단계와, 성능측정 서버가 측정된 성능측정 데이터를 수집하여 결과보고서를 작성하고 상기 결과보고서를 기업 클라이언트에 전송하는 단계로 이루어진 것을 특징으로 한다.
본 발명의 다른 일실시예에 따르면 상기 성능측정을 등록하는 단계 이후에 성능측정 서버가 상기 요청한 기업 클라이언트의 응용 서버에 접속하여 시험 가동하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명의 다른 일실시예에 따르면 상기 성능측정 서버가 상기 요청된 성능측정을 등록하는 단계는 성능측정 서버와 기업 클라이언트가 성능측정에 대한 전자결재를 수행하는 것을 특징으로 한다.
본 발명의 다른 일실시예에 따르면 상기 성능측정 데이터를 생성하는 단계는 성능측정 데이터 생성에 따른 비용을 요청하는 것을 특징으로 한다.
본 발명의 다른 일실시예에 따르면 상기 성능측정 데이터를 생성하는 단계와 결과보고서를 기업 클라이언트에 전송하는 단계는 성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계와, 성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계와, 성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계와, 선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계와, 선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계와, 성능 측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계로 이루어진 제어방법에 의해서 성능측정 하는 것을 특징으로 한다.
본 발명의 다른 일실시예에 따르면 상기 사용자 클라이언트는 개인용 PC 또는 소규모 네트워크가 형성된 개인용 PC가 사용되지 않는 시간대에서 성능측정에 활용되는 것을 특징으로 한다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다.
도 2는 본 발명에 따른 전산시스템 성능을 시험하기 위한 그리드 컴퓨팅 시스템 구성도로서, 상기 시스템은 응용 서버(100)와, 다수의 사용자 클라이언트 (200)와, 성능측정 서버(300)와, 관리자 클라이언트(400)로 구성된 네트워크를 구축함에 따라 상기 성능측정 서버(300)가 다수의 사용자 클라이언트(100)의 자원을 수집하여 상기 응용 서버(200)의 성능을 분석한다.
보다 상세하게 상기 응용 서버(100)는 시험대상인 응용프로그램이 설치되어 있고 다수의 사용자 클라이언트(200)에게 상기 응용프로그램을 서비스하고 있는 바, 상기 응용프로그램은 다수의 사용자 클라이언트(200)로부터 스크립트에 명시된 절차 및 방법에 의하여 응용프로그램이 서비스하는 과정에 대한 요청을 수신한다. 상기 스크립트는 로그인 과정, 상기 로그인 과정 이후에 게시판으로 이동하는 과정, 다운로드 과정 등과 같은 시나리오를 포함하고, 일종의 응용 서버(100)의 성능을 측정하기 위해서 가해지는 부하이다.
상기 다수의 사용자 클라이언트(200)는 응용 서버(100)의 응용프로그램을 측정하기 위한 성능측정 프로그램이 설치되고 상기 성능측정 프로그램을 이용하여 스크립트와, 스크립트를 수행하라는 명령을 수신한다. 상기 성능측정 프로그램은 성능측정 서버(300)로부터 다운받아 실행되어 설치되고 상기 스크립트를 수행하라는 명령은 성능측정 서버(300)를 제어하는 관리자 클라이언트(400)에 의하여 입력된 명령이다.
따라서, 스크립트를 수신한 다수의 사용자 클라이언트(200)는 스크립트에 포함된 시나리오에 의해서 응용 서버(100)에 로그인하고, 게시판을 이용하고, 다운로드하는 모든 일련의 과정을 수행하고 이에 따라 각각의 사용자 클라이언트(200)는 수행된 결과값을 수집한다.
한편, 다수의 사용자 클라이언트(200)는 각 개인이 사용하는 개인용 컴퓨터뿐만 아니라, 개인용 컴퓨터가 소규모 네트워크를 형성하고 있는 단체의 컴퓨터가 될 수 있다. 특히 소규모 네트워크를 형성하고 있는 단체는 PC방이 가장 바람직하다.
결과적으로 다수의 사용자 클라이언트(200)는 각각의 클라이언트가 응용 서버(100)에 접속하여 성능시험한 데이터를 스스로 생성하고 이와 같이 생성된 데이터를 성능측정 서버(300)로 전송함으로써, 응용 서버(100)의 성능을 측정할 수 있다.
상기 성능측정 서버(300)는 응용 서버(100)에 스크립트에 명시된 절차에 따라 부하를 가하기 위한 프로그램을 다수의 다수의 사용자 클라이언트(200)로 전송하고, 관리자 클라이언트(400)에 의해서 입력된 스크립트 실행명령을 수신하여 다수의 사용자 클라이언트(200)로 전송한다. 또한, 다수의 사용자 클라이언트(200)는 상기 스크립트를 수신하여 절차에 따라 응용 서버(100)에 설치된 응용프로그램과 통신을 하면서 응용프로그램의 성능상태를 수집하여 성능측정 서버(300)로 전송하고, 성능측정 서버(300)는 수집된 데이터를 이용하여 응용 서버(100)에 설치된 응용프로그램의 성능상태를 분석한다.
또한, 성능측정 서버(300)는 응용 서버(100)의 성능을 측정하기 위해 필요한 일정 수의 사용자 클라이언트(200)가 필요함에 따라 시험 가능한 클라이언트인가 그렇지 않는 클라이언트인가를 확인이 필요할 뿐만 아니라 시험도중 강제 종료되는 클라이언트가 있을 경우를 대비하여 일정 수 이상의 클라이언트를 확보하여 응용 서버(100)의 성능을 측정한다.
이에 따른 실시예를 들어 간략히 설명하면 다음과 같다.
응용 서버(100)의 성능을 측정하기 위하여 필요한 사용자 클라이언트의 수가 1000개라고 가정하고, 상기 사용자 클라이언트는 성능측정 프로그램이 설치된 것으로 가정한다. 성능측정 서버(300)는 성능측정에 참가할 다수의 사용자 클라이언트(200) 중에서 1000을 만족하지 못할 경우 다시 100대의 클라이언트를 선별하여 성능측정에 참여하도록 한다.
한편, 성능측정 서버(300)는 다수의 사용자 클라이언트(200) 사이에 TCP/UDP/IP 기반으로 통신하고, 또한 응용 서버(100)와 다수의 사용자 클라이언트(200) 사이에는 응용 서버(100)에 설치된 응용프로그램이 요구하는 형태를 일치시켜서 통신하는 바, 상기 응용프로그램이 웹 서비스 프로그램인 경우는 HTTP 프로토콜을 사용하며, 상기 응용프로그램이 데이터베이스인 경우 TCP/IP 기반 SQL(Structured Query Language)로 통신하며, 소프트웨어 프레임워크(Software Framework) 표준화를 지원하는 경우는 XML(Extensible Markup Language)로 통신한다. 또한 통상적으로 다수의 사용자 클라이언트(200)와 응용프로그램 사이에는 기본적으로 인터넷 기반의 TCP/UDP/IP 통신을 한다.
이상 설명한 성능측정 서버(300)는 최종적으로 다수의 사용자 클라이언트(200)로부터 응용 서버(100)를 시험한 데이터를 수집하여 성능측정을 분석한 결과보고서를 자동으로 작성한다. 상기 결과보고서는 수집된 사용자 클라이언트(200)의 데이터를 기초로 연산처리하여 성능측정과 관련된 접속상태, 응답시간, 다운로드시 간 등의 해당 목록에 따라 표시된다.
상기 관리자 클라이언트(400)는 성능측정 서버(300)에 응용 서버(100)의 성능을 시험하기 위한 스크립트 실행명령을 제공하고, 또한 사용자 클라이언트(200)에 응용 서버(200)의 성능을 시험하기 위한 스크립트를 전송하는 명령을 제공한다. 더욱이, 관리자 클라이언트(400)는 성능측정 서버(300)와 HTTP(Hypertext Transfer Protocol) 프로토콜 또는 TCP/UDP/IP 프로토콜을 사용하여 통신한다. 한편, 관리자 클라이언트(400)는 다수의 사용자 클라이언트(200)로부터 스크립트 수행에 따른 응용 서버(100)의 성능측정 데이터의 수집상태와, 성능측정 서버(300)에서 분석한 결과보고서가 표시된다.
도 3은 본 발명에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법을 나타낸 흐름도로서, 상기 제어방법은 다음과 같은 단계를 수행한다.
성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계(S10)와, 성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계(S20)와, 성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계(S30)와, 선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계(S40)와, 선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계(S50)와, 성능 측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계(S60)로 이루어진다.
상기 성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계(S10)는 성능측정 서버(300)가 다수의 사용자 클라이언트(200)를 이용하여 응용 서버(100)의 응용프로그램 성능을 측정하기 위한 성능측정 프로그램이 저장되어 있으며, 상기 성능측정 프로그램을 인터넷을 통하여 다운로드하여 다수의 사용자 클라이언트(200)에 설치하도록 한다.
상기 성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계(S20)는 응용 서버(100)의 성능을 측정하기 위해서 가장 바람직한 개수의 사용자 클라이언트(200)를 이용하여 측정하는 바, 상기 다수의 사용자 클라이언트(200) 중에 접속하지 않은 사용자 클라이언트(200), 성능시험 측정 도중 강제 종료되는 사용자 클라이언트(200) 등 여러 가지 상황이 발생할 수 있음으로 성능측정 서버(300)는 최초 측정하고자 하는 사용자 클라이언트(200) 수보다 일정 개수 이상의 사용자 클라이언트(200)를 더 포함시켜 성능측정에 사용한다.
따라서, 성능측정 할 수 있는 사용자 클라이언트(200)를 확인하기 위해서 성능측정 서버(300)는 특정일, 특정시간에 응용 서버(100)를 측정할 수 있는지 해당 사용자 클라이언트(200)에 질의하고 그에 따른 답변을 확인함으로써 성능측정 사용자 클라이언트(200)를 선별한다.
대표적으로 퇴근 이후에 가동하지 않는 사무실의 개인용 클라이언트는 심야에 성능측정 클라이언트로 활용할 수 있고 PC방의 클라이언트들은 손님이 없는 시 간에 성능측정 클라이언트로 활용할 수 있다. 또한 개인용이나 PC방의 클라이언트 중에서 PC 사양이 우수하거나 전원이 켜져 있는 시간이 긴 클라이언트, 시험 참가 기여도가 우수한 클라이언트와 같이 시험의 특징에 다라 사용중인 클라이언트를 선별하여 시험에 참가시킬 수 있다.
더욱이 상기 사용자 클라이언트(200)는 PC, PDA, 핸드폰, 인터넷 장치와 연산장치가 부착된 단말기가 해당된다.
상기 성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계(S30)는 S20단계에서 성능측정 서버(300)가 선별된 사용자 클라이언트(200)에 성능측정하기 위하여 실질적으로 사용자 클라이언트(200)가 접속하여 특정행위를 하는 것과 같은 시나리오가 포함된 스크립트 전송한다. 즉, 스크립트는 일종의 부하로서 로그인 과정, 상기 로그인 과정 이후에 게시판으로 이동하는 과정, 다운로드 과정 등과 같은 시나리오를 포함한다.
상기 선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계(S40)는 성능측정 스크립트를 받은 선별된 사용자 클라이언트(200)가 스크립트를 이용하여 응용 서버(100)에 접속한 후에 스크립트에 포함된 시나리오에 의해서 응용 서버(100)에 부하를 가함에 따라 시나리오에 해당하는 성능측정 데이터를 생성한다. 상기 성능측정 데이터는 다양한 종류가 될 수 있는 바, 대표적으로 웹 페이지 이동 속도, 다운로드 속도, 응답 시간 등이 있다.
상기 선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계(S50)는 선별된 각각의 사용자 클라이언트(200)가 스크립트에 의해서 생성된 다양한 종류의 성능측정 데이터를 성능측정 서버(300)로 전송된다. 상기 성능측정 데이터의 교류는 메시지 형식으로 교류된다.
상기 성능측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계(S60)는 성능측정 서버(300)가 각각의 선별된 사용자 클라이언트(200)로부터 성능측정 데이터를 수집하고, 수집된 성능측정 데이터는 분류되어 연산처리과정을 거쳐 통계처리 되고 상기 통계처리된 성능측정 데이터는 일정 형식으로 구축된 성능측정 결과보고서에 자동으로 기입되어 작성된다.
이상 설명한 S10단계 내지 S60단계에서 성능측정 서버(300)와 사용자 클라이언트(200)는 메시지 형식으로 성능측정 데이터가 교류되고, 또한 사용자 클라이언트(200)의 그리드 기법으로 자원이 공유됨에 따라 성능측정 데이터를 성능측정 서버(300)에 제공한다. 또한
도 4는 본 발명에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 시스템을 이용한 서비스 구성도로서, 상기 시스템은 응용 서버(110)와, 다수의 사용자 클라이언트(210)와, 성능측정 서버(310)와, 관리자 클라이언트(410)와, 기업 클라이언트(500)로 구성되어 네트워크를 구축함에 따라 기업 클라이언트(500)에서 요청한 성능측정을 서비스한다.
상기 응용 서버(110)와, 다수의 사용자 클라이언트(210)와, 성능측정 서버(310)와, 관리자 클라이언트(410)는 도 2에서 설명한 바와 같이 유사한 작용을 하고 다소 다른 부분에 대하여 하기와 같이 설명한다.
보다 상세하게 상기 성능측정 서버(310)는 기업 클라이언트(500)로부터 성능 측정 요청이 등록되면 전자결제수단을 이용하여 결제하고 성능측정을 수행하는 해당 사용자 클라이언트(210)에 전자결제수단을 이용하여 비용을 지불한다.
상기 사용자 클라이언트(210)는 성능측정 서버(310)로부터 성능측정을 수행함으로써 발생하는 비용을 지급받는다.
상기 기업 클라이언트(500)는 성능측정 서버(310)에서 운용하는 홈페이지에 접속하여 로그인 과정을 거쳐 성능측정을 요청한다. 상기 성능측정 요청은 홈페이지에 서버종류, IP, 성능측정 날짜 및 시간, 성능시험 종류 등 이고 이를 등록한다. 등록 후 시험측정이 종료되면 성능측정 서버(310)로부터 결과보고서를 다운받는다. 또한, 등록할 때 전자결제 수단을 이용하여 기업 클라이언트(500)는 성능측정 서버(310)에 비용을 결제한다.
도 5는 본 발명에 따른 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법 흐름도로서, 서비스방법은 다음과 같은 단계를 수행한다.
기업 클라이언트가 성능측정 서버에 성능측정을 요청하는 단계(S70)와, 성능측정 서버가 상기 요청된 성능측정을 등록하는 단계(S80)와, 성능측정 서버가 상기 요청한 기업 클라이언트의 응용 서버에 접속하여 시험 가동하는 단계(S90)와, 성능측정 서버가 상기 시험 가동에 의하여 성능측정 스크립트와, 일정을 작성하여 기업 클라이언트에 전송하는 단계(S100)와, 성능측정 서버가 상기 작성된 스크립트와 일정에 의하여 성능측정을 요청한 응용서버의 성능을 측정하여 성능측정 데이터를 생성하는 단계(S110)와, 성능측정 서버가 측정된 성능측정 데이터를 수집하여 결과보고서를 작성하고 상기 결과보고서를 기업 클라이언트에 전송하는 단계(S120)로 이 루어진다.
상기 기업 클라이언트가 성능측정 서버에 성능측정을 요청하는 단계(S70)는 기업 클라이언트(500)가 성능측정 서버(310)에서 운용되는 홈페이지에 로그인하여 서버종류, IP, 성능측정 날짜 및 시간, 성능시험 종류 등을 입력함으로써 성능측정을 요청한다.
상기 성능측정 서버가 상기 요청된 성능측정을 등록하는 단계(S80)는 S70단계에서 요청된 성능측정에 대하여 성능측정 서버(310)가 성능측정 요청이 등록됨과 동시에 전자결제수단을 이용하여 기업 클라이언트(500)와 거래를 성립한다.
상기 성능측정 서버가 상기 요청한 기업 클라이언트의 응용 서버에 접속하여 시험 가동하는 단계(S90)는 S80단계에서 성능측정이 등록되면 성능측정 서버(310)가 기업 클라이언트(500)의 해당 응용 서버(110)에 접속하여 시험 모델링을 수행한 후에 측정하고자 하는 시나리오가 포함된 스크립트를 제작한다.
상기 성능측정 서버가 상기 시험 가동에 의하여 성능측정 스크립트와, 일정을 작성하여 기업 클라이언트에 전송하는 단계(S100)는 S90단계에서 제작된 스크립트를 사용하여 측정하고자 하는 날짜, 시간 등에 관한 성능측정 일정을 기업 클라이언트(500)로 전송한다.
상기 성능측정 서버가 상기 작성된 스크립트와 일정에 의하여 성능측정을 요청한 응용서버의 성능을 측정하여 성능측정 데이터를 생성하는 단계(S110)와 상기 성능측정 서버가 측정된 성능측정 데이터를 수집하여 결과보고서를 작성하고 상기 결과보고서를 기업 클라이언트에 전송하는 단계(S120)는 상기 도 3에 도시된 바와 같이 성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계(S10)와, 성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계(S20)와, 성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계(S30)와, 선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계(S40)와, 선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계(S50)와, 성능 측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계(S60)를 수행하여 작성된 결과보고서를 기업클라이언트(500)에 전송한다.
또한, 상기 성능측정 서버가 상기 작성된 스크립트와 일정에 의하여 성능측정을 요청한 응용서버의 성능을 측정하여 성능측정 데이터를 생성하는 단계(S110)는 선별된 사용자 클라이언트(210)가 성능측정 데이터를 생성함에 따른 보상으로 성능측정 서버(310)에 비용을 요청하고 상기 성능측정 서버(310)는 요청된 비용을 다양한 방법으로 지급한다.
지금까지 본 발명에 대해서 상세히 설명하였으나, 그 과정에서 언급한 실시예는 예시적인 것일 뿐, 한정적인 것이 아님을 분명히 하며, 본 발명은 이하의 특허청구범위에 의해 제공되는 본 발명의 기술적 사상이나 분야를 벗어나지 않는 범위내에서, 균등하게 대처될 수 있는 정도의 구성요소 변경은 본 발명의 범위에 속한다 할 것이다.
이상에서 설명한 바와 같이 본 발명은 시스템 구축이 완료되고 운용을 시작하는 시점에서 실제 사용자의 요청에 의해 많은 문제점들이 발생될 수 있는 것을 현실적인 예상되는 사용자의 요청을 생성하여 성능을 측정함으로써 시스템이 운용되면서 발생될 수 있는 문제점들을 사전에 예방하는 효과가 있고, 또한 문제점들을 사전에 예방함으로써 시행착오를 줄이고 시행착오로 인한 각종 경비를 절감하는 효과가 있다.

Claims (15)

  1. 성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계와;
    성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계와;
    성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계와;
    선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계와;
    선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계와;
    성능 측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계로 이루어는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  2. 제 1 항에 있어서, 상기 성능측정이 가능한 사용자 클라이언트를 선별하는 단계는 최초 측정하고자 하는 사용자 클라이언트 수보다 일정 개수 이상 사용자 클라이언트를 더 포함하여 성능측정 하는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  3. 제 2 항에 있어서, 상기 사용자 클라이언트는 개인용 PC 또는 소규모 네트워크가 형성된 개인용 PC가 사용되지 않는 시간대에서 성능측정에 활용되는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  4. 제 2 항에 있어서, 상기 사용자 클라이언트는 CPU, 메모리와 같은 시스템 사양이 우수하고 전원이 켜져 있는 시간이 긴 클라이언트와, 시험 참가 기여도가 우수한 클라이언트와 같이 시험의 특징에 따라 사용중인 클라이언트를 선별하여 성능측정에 활용되는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  5. 제 3 항 또는 제 4 항에 있어서, 상기 사용자 클라이언트는 PC, PDA, 핸드폰, 인터넷 장치와 연산장치가 부착된 단말기 중 어느 하나로 성능측정하는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  6. 제 1 항에 있어서, 상기 성능측정 스크립트를 전송하는 단계는 실질적으로 운용 서버에 접속하여 운용 서버의 응용프로그램을 사용하는 것과 같은 시나리오가 스크립트에 포함되어 전송되는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  7. 제 1 항에 있어서, 상기 성능측정 데이터를 성능측정 서버에 전송하는 단계는 성능측정 서버와 사용자 클라이언트가 메시지 형식으로 성능측정 데이터가 교류되는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  8. 제 6 항 또는 제 7 항에 있어서, 상기 성능측정 서버와 사용자 클라이언트는 메시지 형식으로 성능측정 데이터가 교류되는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  9. 제 6 항 또는 제 7 항에 있어서, 상기 사용자 클라이언트는 그리드 기법에 의하여 성능측정 서버에 성능측정 데이터를 제공하는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 제어방법.
  10. 기업 클라이언트가 성능측정 서버에 성능측정을 요청하는 단계와;
    성능측정 서버가 상기 요청된 성능측정을 등록하는 단계와;
    성능측정 서버가 등록된 성능측정에 대한 성능측정 스크립트와, 일정을 작성하여 기업 클라이언트에 전송하는 단계와;
    성능측정 서버가 상기 작성된 스크립트와 일정에 의하여 성능측정을 요청한 응용서버의 성능을 측정하여 성능측정 데이터를 생성하는 단계와;
    성능측정 서버가 측정된 성능측정 데이터를 수집하여 결과보고서를 작성하고 상기 결과보고서를 기업 클라이언트에 전송하는 단계로 이루어진 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법.
  11. 제 10 항에 있어서, 상기 성능측정을 등록하는 단계 이후에 성능측정 서버가 상기 요청한 기업 클라이언트의 응용 서버에 접속하여 시험 가동하는 단계를 더 포함하는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법.
  12. 제 10 항 또는 제 11 항에 있어서, 상기 성능측정 서버가 상기 요청된 성능측정을 등록하는 단계는 성능측정 서버와 기업 클라이언트가 성능측정에 대한 전자결재를 수행하는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법.
  13. 제 10 항 또는 제 11 항에 있어서, 상기 성능측정 데이터를 생성하는 단계는 성능측정 데이터 생성에 따른 비용을 요청하는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법.
  14. 제 10 항 또는 제 11 항에 있어서, 상기 성능측정 데이터를 생성하는 단계와 결과보고서를 기업 클라이언트에 전송하는 단계는
    성능측정 서버가 성능측정 프로그램을 다수의 사용자 클라이언트에 제공하는 단계와;
    성능측정 서버가 상기 성능측정 프로그램을 설치한 다수의 사용자 클라이언트 중에서 성능측정이 가능한 사용자 클라이언트를 선별하는 단계와;
    성능측정 서버가 상기 선별된 사용자 클라이언트에 성능측정 스크립트를 전송하는 단계와;
    선별된 사용자 클라이언트가 상기 성능측정 스크립트를 수행하여 성능측정 데이터를 생성하는 단계와;
    선별된 사용자 클라이언트가 상기 생성된 성능측정 데이터를 성능측정 서버에 전송하는 단계와;
    성능 측정 서버가 상기 전송된 성능측정 데이터를 수집하여 성능측정 결과보고서를 작성하는 단계로 이루어진 제어방법에 의해서 성능측정 하는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법.
  15. 제 14 항에 있어서, 상기 사용자 클라이언트는 개인용 PC 또는 소규모 네트워크가 형성된 개인용 PC가 사용되지 않는 시간대에서 성능측정에 활용되는 것을 특징으로 하는 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅 서비스방법.
KR1020050114921A 2005-11-29 2005-11-29 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법 KR100551454B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020050114921A KR100551454B1 (ko) 2005-11-29 2005-11-29 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법
PCT/KR2006/005049 WO2007064129A1 (en) 2005-11-29 2006-11-28 Grid computing control method for testing application program capacity of server and service method thereof
US11/718,069 US20090157864A1 (en) 2005-11-29 2006-11-28 Grid computing control method for testing application program capacity of server and service method thereof
CN2006800451902A CN101322113B (zh) 2005-11-29 2006-11-28 用于试验服务器应用程序性能的网格计算控制方法及其服务方法
JP2008542251A JP2009517734A (ja) 2005-11-29 2006-11-28 サーバの応用プログラム性能を試験するためのグリッドコンピューティング制御方法及びそのサービス方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050114921A KR100551454B1 (ko) 2005-11-29 2005-11-29 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법

Publications (1)

Publication Number Publication Date
KR100551454B1 true KR100551454B1 (ko) 2006-02-14

Family

ID=37178806

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050114921A KR100551454B1 (ko) 2005-11-29 2005-11-29 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법

Country Status (5)

Country Link
US (1) US20090157864A1 (ko)
JP (1) JP2009517734A (ko)
KR (1) KR100551454B1 (ko)
CN (1) CN101322113B (ko)
WO (1) WO2007064129A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100926362B1 (ko) 2007-08-27 2009-11-10 주식회사 케이티 서버 성능 관리 방법 및 시스템
WO2012144722A1 (en) * 2011-04-20 2012-10-26 Korea National University Of Transportation Industry-Academic Cooperation Foundation Interface construction system for controlling remote terminal using web technology by employing control terminal and method of controlling the same

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5112277B2 (ja) * 2008-12-18 2013-01-09 株式会社日立製作所 再現処理方法、計算機システムおよびプログラム
CN102708048B (zh) * 2012-04-21 2015-07-01 北京云测信息技术有限公司 移动应用测试方法和系统
US20140013308A1 (en) * 2013-04-20 2014-01-09 Concurix Corporation Application Development Environment with Services Marketplace
US9996562B2 (en) 2013-07-09 2018-06-12 Oracle International Corporation Automated database migration architecture
US9967154B2 (en) * 2013-07-09 2018-05-08 Oracle International Corporation Advanced customer support services—advanced support cloud portal
US9805070B2 (en) 2013-07-09 2017-10-31 Oracle International Corporation Dynamic migration script management
US11157664B2 (en) 2013-07-09 2021-10-26 Oracle International Corporation Database modeling and analysis
US9747311B2 (en) 2013-07-09 2017-08-29 Oracle International Corporation Solution to generate a scriptset for an automated database migration
US10776244B2 (en) 2013-07-09 2020-09-15 Oracle International Corporation Consolidation planning services for systems migration
CN104657278A (zh) * 2015-03-13 2015-05-27 百度在线网络技术(北京)有限公司 客户端性能评估方法及系统
US11036696B2 (en) 2016-06-07 2021-06-15 Oracle International Corporation Resource allocation for database provisioning
US11256671B2 (en) 2019-09-13 2022-02-22 Oracle International Corporation Integrated transition control center

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2917939B2 (ja) * 1996-11-14 1999-07-12 日本電気株式会社 サーバ性能測定方式
JP2000200230A (ja) * 1999-01-05 2000-07-18 Hitachi Software Eng Co Ltd クライアント・サ―バシステムの性能測定方法及びクライアント・サ―バシステム
CN1115839C (zh) * 2000-01-28 2003-07-23 国际商业机器公司 均衡镜象服务器负载的方法及装置
JP2002132896A (ja) * 2000-10-18 2002-05-10 Kusumoto Kasei Kk 計測試験システムおよびそのプログラム
US20020198985A1 (en) * 2001-05-09 2002-12-26 Noam Fraenkel Post-deployment monitoring and analysis of server performance
AU2002317618A1 (en) * 2001-08-06 2003-02-24 Mercury Interactive Corporation System and method for automated analysis of load testing results
JP2003114812A (ja) * 2001-10-04 2003-04-18 Nec Corp Webページ運用監視方法、Webページ運用監視システム及びWebページ運用監視プログラム
JP4359031B2 (ja) * 2002-09-18 2009-11-04 株式会社リコー システムコントローラ
CN1277203C (zh) * 2002-12-24 2006-09-27 英业达股份有限公司 分散测试与集中管理的测试系统及方法
JP2004240671A (ja) * 2003-02-05 2004-08-26 Hitachi Ltd 分散計算機の処理方法及びシステム
JP3977765B2 (ja) * 2003-03-31 2007-09-19 富士通株式会社 グリッドコンピューティングを用いたシステムにおけるリソース提供方法,そのシステムにおける監視装置およびその監視装置用プログラム
JP3929981B2 (ja) * 2004-01-22 2007-06-13 日本電信電話株式会社 グリッドシステムにおける決済情報算出方法、グリッド仲介装置、グリッド仲介プログラム
JP3927181B2 (ja) * 2004-01-22 2007-06-06 日本電信電話株式会社 グリッドシステムにおけるジョブ割付方法及びグリッド仲介装置
US20050165854A1 (en) * 2004-01-23 2005-07-28 Burnett Robert J. System for managing job performance and status reporting on a computing grid
US7584226B2 (en) * 2005-05-24 2009-09-01 International Business Machines Corporation System and method for peer-to-peer grid based autonomic and probabilistic on-demand backup and restore

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100926362B1 (ko) 2007-08-27 2009-11-10 주식회사 케이티 서버 성능 관리 방법 및 시스템
WO2012144722A1 (en) * 2011-04-20 2012-10-26 Korea National University Of Transportation Industry-Academic Cooperation Foundation Interface construction system for controlling remote terminal using web technology by employing control terminal and method of controlling the same
KR101235199B1 (ko) 2011-04-20 2013-02-20 한국교통대학교산학협력단 웹기술을 이용하여 저성능 원격지 장치를 제어하기 위한 인터페이스 구축 시스템 및 그 방법

Also Published As

Publication number Publication date
US20090157864A1 (en) 2009-06-18
CN101322113B (zh) 2010-05-26
JP2009517734A (ja) 2009-04-30
CN101322113A (zh) 2008-12-10
WO2007064129A1 (en) 2007-06-07

Similar Documents

Publication Publication Date Title
KR100551454B1 (ko) 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법
CN104579822B (zh) 基于Http协议的移动应用自动化性能测试系统及方法
Cheng et al. Evaluating the effectiveness of the rainbow self-adaptive system
CN102244594B (zh) 在手动和自动测试工具中的网络仿真技术
RU2320015C2 (ru) Развертывание информации о конфигурации
US6601020B1 (en) System load testing coordination over a network
Thio et al. Automatic measurement of a qos metric for web service recommendation
Lehrig et al. CloudStore—towards scalability, elasticity, and efficiency benchmarking and analysis in Cloud computing
US8819638B2 (en) Application protoyping suite
US10277475B2 (en) System and method for dynamically testing networked target systems
CA2620428A1 (en) Performance evaluation of a network-based application
JP2005521359A (ja) ソフトウェアアプリケーションのネットワーク動作特性を測定する方法、システム及びコンピュータプログラム
US20140157244A1 (en) Rule engine system controlling devices of disparate types and protocols
Dhiman et al. Performance testing: a comparative study and analysis of web service testing tools
CN113037616B (zh) 用于协同控制多台机器人的交互方法和装置
CN104683181B (zh) 一种性能监控方法、设备和系统
KR100551452B1 (ko) 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅시스템
CN109828921A (zh) Html5网页自动化功能测试方法、系统和电子设备
CN111045940B (zh) 软件自动化测试方法、装置、架构、服务器及存储介质
CN106407061A (zh) 一种北向接口测试装置和北向接口的测试方法
CN113127356A (zh) 压测方法、装置、电子设备及存储介质
Aries et al. Capacity and performance analysis of distributed enterprise systems
CN111221687B (zh) 一种云存储测试系统和方法
Isaacs et al. Performance analysis in loosely-coupled distributed systems
Galpaya Stress Testing Tool to check the performance of a Moodle Instance

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130204

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140127

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20150130

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20160211

Year of fee payment: 11

LAPS Lapse due to unpaid annual fee