WO2013169059A1 - 웹 서비스 모니터링 시스템 및 방법 - Google Patents

웹 서비스 모니터링 시스템 및 방법 Download PDF

Info

Publication number
WO2013169059A1
WO2013169059A1 PCT/KR2013/004140 KR2013004140W WO2013169059A1 WO 2013169059 A1 WO2013169059 A1 WO 2013169059A1 KR 2013004140 W KR2013004140 W KR 2013004140W WO 2013169059 A1 WO2013169059 A1 WO 2013169059A1
Authority
WO
WIPO (PCT)
Prior art keywords
agent
application
web page
installation
browser api
Prior art date
Application number
PCT/KR2013/004140
Other languages
English (en)
French (fr)
Inventor
김선득
오현택
Original Assignee
삼성에스디에스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성에스디에스 주식회사 filed Critical 삼성에스디에스 주식회사
Publication of WO2013169059A1 publication Critical patent/WO2013169059A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Debugging And Monitoring (AREA)

Abstract

웹 서비스 모니터링 시스템 및 방법이 개시된다. 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템은, 관리자로부터 대상 시스템의 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 입력받고, 상기 대상 시스템의 시뮬레이션 테스트 결과를 상기 관리자에게 출력하기 위한 인터페이스를 제공하는 관리 모듈; 입력된 상기 정책 및 상기 접속 시나리오를 저장하는 데이터베이스; 및 상기 데이터베이스에 저장된 상기 접속 시나리오 및 상기 정책에 따라 상기 대상 시스템에 접속하여 상기 대상 시스템에 대한 시뮬레이션 테스트를 수행하는 에이전트를 포함한다.

Description

웹 서비스 모니터링 시스템 및 방법
본 발명의 실시예들은 에이전트를 이용한 웹 서비스의 모니터링 기술과 관련된다.
최근 인터넷 기술의 발전으로 인하여 다양한 종류의 웹 서비스들이 네트워크상에서 제공되고 있다. 기존의 웹 서비스들이 단순한 텍스트 및 이미지의 전달에 그쳤다면, 최근에는 인터넷 뱅킹, 증명서 발급, 홈 트레이딩 등 제공되는 서비스의 수 뿐만 아니라 서비스 제공 범위 또한 크게 늘어났다.
이와 같이 웹 서비스들이 다양화, 복잡화되면서 웹 서비스의 원활한 제공을 위하여 수시로 웹 서비스가 제대로 동작하는지의 여부를 모니터링할 필요가 있다. 그러나 종래의 웹 서비스 모니터링은 관리자가 직접 해당 웹 서비스에 접속하여 각 기능들을 실제로 수행해 보는 방식인 바, 불편하고 정확한 모니터링이 어려운 문제가 있었다. 또한 웹 서비스에 따라 웹 사이트 상에서 브라우저 API 또는 어플리케이션을 다운로드 받아 설치하여야 서비스가 가능한 경우 해당 브라우저 API 또는 어플리케이션이 정상적으로 다운로드 및 설치되는지의 여부를 관리자가 확인하는 것이 사실상 불가능하였다.
본 발명의 실시예들은 에이전트를 이용하여 웹 서비스에서 제공되는 기능들의 정상 동작 여부를 자동으로 모니터링하기 위한 시스템 및 방법을 제공하기 위한 것이다.
본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템은, 관리자로부터 대상 시스템의 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 입력받고, 상기 대상 시스템의 시뮬레이션 테스트 결과를 상기 관리자에게 출력하기 위한 인터페이스를 제공하는 관리 모듈; 입력된 상기 정책 및 상기 접속 시나리오를 저장하는 데이터베이스; 및 상기 데이터베이스에 저장된 상기 접속 시나리오 및 상기 정책에 따라 상기 대상 시스템에 접속하여 상기 대상 시스템에 대한 시뮬레이션 테스트를 수행하는 에이전트를 포함한다.
본 발명의 일 실시예에 따른 웹 서비스 모니터링 방법은, 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 로그인 테스트 요청을 수신하는 단계; 상기 에이전트에서, 상기 대상 시스템의 로그인 웹 페이지에 접속하는 단계; 상기 에이전트에서, 접속된 상기 로그인 웹 페이지를 구조화하여 상기 대상 시스템으로의 로그인을 위한 객체를 추출하는 단계; 상기 에이전트에서, 추출된 상기 객체에 계정 정보를 부가하여 상기 대상 시스템으로 송신하여 상기 대상 시스템으로의 로그인을 요청하는 단계; 및 상기 에이전트에서, 상기 대상 시스템으로의 로그인이 정상적으로 완료되었는지의 여부를 판단하는 단계를 포함한다.
본 발명의 다른 실시예에 따른 웹 서비스 모니터링 방법은, 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 브라우저 API 설치 테스트 요청을 수신하는 단계; 상기 에이전트에서, 상기 대상 시스템의 브라우저 API 설치 웹 페이지에 접속하는 단계; 상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 설치 정보에 따라 브라우저 API 설치 파일을 다운로드하고, 다운로드된 상기 브라우저 API의 설치 파일을 실행하여 상기 브라우저 API를 가상 머신에 설치하는 단계; 및 상기 에이전트에서, 상기 브라우저 API가 정상적으로 설치되었는지의 여부를 판단하는 단계를 포함한다.
본 발명의 다른 실시예에 따른 웹 서비스 모니터링 방법은, 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 어플리케이션 설치 테스트 요청을 수신하는 단계; 상기 에이전트에서, 상기 대상 시스템의 어플리케이션 설치 웹 페이지에 접속하는 단계; 상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 설치 정보에 따라 브라우저 API를 가상 머신에 설치하는 단계; 상기 에이전트에서, 설치된 상기 브라우저 API에 포함된 어플리케이션 설치 정보에 따라 상기 대상 시스템으로부터 어플리케이션 설치 파일을 다운로드하고, 다운로드된 상기 설치 파일을 실행하여 상기 어플리케이션을 상기 가상 머신에 설치하는 단계; 및 상기 에이전트에서, 상기 어플리케이션이 정상적으로 설치되었는지의 여부를 판단하는 단계를 포함한다.
본 발명의 다른 실시예에 따른 웹 서비스 모니터링 방법은, 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 브라우저 API 실행 테스트 요청을 수신하는 단계; 상기 에이전트에서, 상기 대상 시스템의 브라우저 API 탑재 웹 페이지에 접속하는 단계; 상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 정보에 따라 브라우저 API를 실행하는 단계; 및 상기 에이전트에서, 상기 브라우저 API가 정상적으로 실행되는지의 여부를 판단하는 단계를 포함한다.
본 발명의 다른 실시예에 따른 웹 서비스 모니터링 방법은, 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 어플리케이션 실행 테스트 요청을 수신하는 단계; 상기 에이전트에서, 상기 대상 시스템의 어플리케이션 탑재 웹 페이지에 접속하는 단계; 상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 정보에 따라 브라우저 API를 실행하는 단계; 상기 에이전트에서 실행된 상기 브라우저 API에 포함된 어플리케이션 정보에 따라 어플리케이션을 실행하는 단계; 및 상기 에이전트에서, 상기 어플리케이션이 정상적으로 실행되는지의 여부를 판단하는 단계를 포함한다.
본 발명의 실시예들에 따를 경우 에이전트를 통하여 웹 서비스의 기능을 자동으로 모니터링하고, 문제가 발생한 경우 실시간으로 관리자에게 해당 문제와 관련된 정보를 제공할 수 있다.
또한, 본 발명의 실시예들에 따를 경우, 모니터링 대상 웹 서비스에 브라우저 API 또는 어플리케이션 설치가 필요한 경우에도 해당 브라우저 API 또는 어플리케이션의 설치 및 정상 실행 여부를 모니터링하는 수단을 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)의 구성을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 에이전트(106)의 상세 구성을 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 대상 시스템(110) 로그인 시뮬레이션 테스트(300) 과정을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 브라우저 API 설치 시뮬레이션 테스트(400) 과정을 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 어플리케이션 설치 시뮬레이션 테스트(500) 과정을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 브라우저 API 실행 시뮬레이션 테스트(600) 과정을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 어플리케이션 실행 시뮬레이션 테스트(700) 과정을 설명하기 위한 도면이다.
이하, 도면을 참조하여 본 발명의 구체적인 실시형태를 설명하기로 한다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.
본 발명을 설명함에 있어서, 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 발명의 기술적 사상은 청구범위에 의해 결정되며, 이하의 실시예는 본 발명의 기술적 사상을 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 효율적으로 설명하기 위한 일 수단일 뿐이다.
도 1은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)의 구성을 나타낸 도면이다. 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)은 대상 시스템의 정상 동작 여부에 대한 시뮬레이션 테스트를 수행하고, 그에 따른 결과를 출력하기 위한 시스템으로서, 가상 머신을 이용하여 대상 시스템에 접속한 뒤 로그인, 브라우저 API (예를 들어, 액티브엑스(Active X) 등) 설치, 응용프로그램 설치 등의 기능을 가상으로 수행하고 그 수행 결과를 관리자에게 출력하거나 또는 데이터베이스에 저장하도록 구성된다. 이때, 대상 시스템은 일반적으로 인터넷 상에서 웹 서비스를 제공하기 위한 시스템으로서, 사용자 계정 발급 및 로그인, 브라우저 API 또는 응용프로그램 설치 기능 등을 제공하는 웹 사이트 등을 의미한다. 예를 들어, 은행, 증권사 또는 관공서 등의 웹 페이지, 기업 등의 사내망, 인터넷 쇼핑몰 등이 본 발명에서의 대상 시스템이 될 수 있다.
한편, 이하의 설명에서 브라우저 API란 웹 브라우저 자체에서는 지원되지 않는 기능을 제공하거나 또는 사용자의 단말에 설치된 일반 응용프로그램과 웹을 연결하는 등의 기능을 제공하기 위하여 웹 페이지를 통해 웹 브라우저에 부가적으로 설치되는 기술로서, 애드온 프로그램(Add-on program), 액티브엑스(Active X) 및 기타 플러그인(Plug-in) 등을 포괄적으로 포함하는 개념을 의미한다.
또한, 어플리케이션(또는 응용프로그램)이란 브라우저 API와 달리 사용자 단말에 독립적으로 설치되어 실행되는 프로그램으로서, 본 발명에서는 특히 상술한 브라우저 API를 통하여 웹 페이지에서 다운로드되어 사용자 단말에 설치되거나 또는 실행되는 프로그램을 의미한다. 즉, 일반적으로 웹 브라우저는 사용자 단말에 어플리케이션을 직접 설치하거나 또는 이를 실행하는 것이 제한되므로, 본 발명에서는 브라우저 API를 경유하여 브라우저상에서 특정 어플리케이션을 설치 또는 실행하도록 구성된다.
도시된 바와 같이, 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)은 관리 모듈(102), 데이터베이스(104), 에이전트(106) 및 서비스 모듈(108)을 포함한다.
관리 모듈(102)은 관리자로부터 대상 시스템(110)의 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 입력 받고, 대상 시스템(110)의 시뮬레이션 테스트 결과를 상기 관리자에게 출력하기 위한 인터페이스를 제공한다. 관리 모듈(102)은 웹 기반으로 구성될 수 있으며, 이에 따라 상기 관리자가 웹 브라우저 등을 통하여 관리 모듈(102)에 접근할 수 있도록 구성될 수 있다.
데이터베이스(104)는 관리 모듈(102)을 통하여 상기 관리자로부터 입력된 상기 정책 및 상기 접속 시나리오를 저장 및 관리한다. 또한, 데이터베이스(104)는 후술할 에이전트(106)에서 수행된 대상 시스템(110)의 테스트 결과를 저장 및 관리하도록 구성될 수 있다.
본 발명의 실시예에서 접속 시나리오는 대상 시스템(110)에 접속하여 테스트를 수행하기 위한 일련의 정보들을 기록한 정보이다. 상기 접속 시나리오는 대상 시스템(110)의 접속 주소, 계정 정보, 설치 대상 브라우저 API 및 설치 대상 프로그램 정보 중 하나 이상을 포함할 수 있다.
예를 들어, 상기 접속 시나리오가 대상 시스템(110)의 로그인 기능을 테스트하기 위한 것일 경우, 상기 접속 시나리오는 대상 시스템(110)의 로그인 웹 페이지 주소(URL), 대상 시스템(110)으로의 로그인을 위한 계정 정보(아이디 및 패스워드 등), 로그인에 성공할 경우 로딩되는 웹 페이지의 주소 등을 포함할 수 있으며, 인증서발급이 필요한 복합인증 기반 웹 서비스인 경우 인증서 발급을 위한 계정 정보(주민번호, 보안카드번호 등)를 더 포함할 수 있다.
또한, 예를 들어 상기 접속 시나리오가 대상 시스템(110)의 브라우저 API 설치 기능을 테스트하기 위한 것일 경우, 상기 접속 시나리오는 대상 시스템(110)의 브라우저 API 설치 웹 페이지 주소, 설치될 브라우저 API의 설치 위치(디렉토리), 상기 브라우저 API의 버전 정보 및 설치 시 추가되는 레지스트리 정보, 상기 브라우저 API의 설치가 정상적으로 완료되는 경우 로딩되는 웹 페이지의 주소 등을 포함할 수 있다.
또한, 예를 들어 상기 접속 시나리오가 대상 시스템(110)의 응용프로그램(어플리케이션) 설치 기능을 테스트하기 위한 것일 경우, 상기 접속 시나리오는 대상 시스템(110)의 어플리케이션 설치 웹 페이지 주소, 설치될 어플리케이션의 설치 위치(디렉토리), 상기 어플리케이션의 버전 정보 및 설치 시 추가되는 레지스트리 정보, 상기 어플리케이션의 설치가 정상적으로 완료되는 경우 로딩되는 웹 페이지의 주소 등을 포함할 수 있다.
한편, 상기 정책은 대상 시스템(110)에 접속하여 테스트를 수행할 때 필요한 설정값이다. 상기 정책은 대상 시스템(110)의 모니터링(테스트) 유형, 모니터링 주기, 모니터링 중 오류 발생시 재시도 횟수, 로그 기록 범위, 정책 변경 여부 확인 주기, 오류 발생 시 테스트 제한 시간(timeout) 및 접속 페이지 주소 수집 여부 중 하나 이상을 포함할 수 있다.
이 중 모니터링 유형은 대상 시스템(110)의 제공 기능 중 어떠한 기능을 테스트할지를 의미하는 것으로서, 예를 들어 로그인, 인증서 발급, 브라우저 API 설치 또는 실행, 어플리케이션 설치 또는 실행 등을 포함할 수 있다.
상기 로그 기록 범위는 테스트 중 발생하는 로그를 어떤 수준까지 기록할 것인지를 결정하는 것으로서, 예를 들어 모든 로그 기록, 경고 메시지 발생 시 기록, 알림 메시지 발생 시 기록, 에러 발생 시 기록 등으로 구분될 수 있다.
접속 페이지 주소 수집 여부는 대상 시스템(110)의 테스트를 위해 접속한 웹 페이지의 주소를 수집할 것인지의 여부를 의미한다.
에이전트(106)는 데이터베이스(104)에 저장된 상기 접속 시나리오 및 상기 정책에 따라 대상 시스템(110)에 접속하여 대상 시스템(110)에 대한 시뮬레이션 테스트를 수행한다. 에이전트(106)는 웹 서비스 모니터링 시스템(100) 내의 가상 머신(Virtual Machine, 112) 내에 설치된다. 가상 머신(112)은 일반적인 사용자 컴퓨터와 동일한 환경을 웹 서비스 모니터링 시스템(100)에 구현한 것으로서, 가상 머신(112)에 설치된 웹 서비스 모니터링 시스템(100)은 마치 일반적인 사용자인 것처럼 대상 시스템(110)에 접속하여 대상 시스템(110)에 대한 시뮬레이션 테스트를 수행할 수 있다. 일반적인 컴퓨터 시스템 내에 별도의 컴퓨터 환경을 가지는 가상 머신을 구현하기 위한 기술은 본 기술분야에서 통상의 지식을 가진 자에게 잘 알려져 있으므로, 여기서는 이에 대한 상세한 설명을 생략한다.
본 발명의 실시예에서, 웹 서비스 모니터링 시스템(100)은 하나 이상의 가상 머신(112)을 포함할 수 있다. 또한 각각의 가상 머신(112)들마다 별도의 에이전트(106)를 구비함으로써 웹 서비스 모니터링 시스템(100)은 동시에 하나 이상의 대상 시스템(110)에 접속하여 시뮬레이션 테스트를 수행할 수 있다. 이러한 에이전트(106)의 상세 구성에 대해서는 도 2에서 상세히 설명한다.
서비스 모듈(108)은 관리 모듈(102) 및 에이전트(106) 간의 통신을 담당하는 모듈로서, 관리 모듈(102)을 통하여 데이터베이스(104)에 저장된 접속 시나리오 및 정책을 수신하여 에이전트(106)로 제공한다. 또한 서비스 모듈(108)은 에이전트(106)의 테스트가 완료되면 에이전트(106)로부터 테스트 결과를 수신하여 관리 모듈(102)로 송신한다. 상기 테스트 결과를 수신한 관리 모듈(102)은 수신된 결과를 관리자에게 출력하거나 또는 데이터베이스(104)에 저장할 수 있다.
도 2는 본 발명의 일 실시예에 따른 에이전트(106)의 상세 구성을 나타낸 도면이다. 도시된 바와 같이, 본 발명의 일 실시예에 따른 에이전트(106)는 제1 서브 에이전트(200) 및 제2 서브 에이전트(202)를 포함한다.
제1 서브 에이전트(200)는 서비스 모듈(108)로부터 수신된 접속 시나리오 및 정책에 따라 대상 시스템(110)에 대한 모니터링 스케줄을 구성한다. 예를 들어, 제1 서브 에이전트(200)는 수신된 상기 접속 시나리오 및 정책에 따라 대상 시스템(110)의 웹 페이지 접속 순서, 오류 발생시 재시도 횟수, 테스트 중간의 유휴 시간 등을 스케줄링할 수 있다. 또한, 제1 서브 에이전트(200)는 제2 서브 에이전트(202)로부터 테스트 결과가 수신되면 이를 서비스 모듈(108)로 송신한다.
또한, 제1 서브 에이전트(200)는, 웹 서비스 모니터링 시스템(100) 내에서 제2 서브 에이전트(202)가 점유하는 메모리가 기 설정된 값을 초과하는 경우 제2 서브 에이전트(202)를 재실행함으로써 제2 서브 에이전트(202)의 이상 동작으로 인해 웹 서비스 모니터링 시스템(100)의 구동에 장애가 발생하는 것을 방지한다. 예를 들어, 제2 서브 에이전트(202)에서 어플리케이션 설치 등의 테스트를 수행하는 과정에서 오류 등으로 메모리가 정상적으로 반환되지 않는 경우가 발생할 수 있다. 이 경우 제1 서브 에이전트(200)는 제2 서브 에이전트(202)를 재시작함으로써 제2 서브 에이전트(202)로 인한 메모리 문제를 사전에 방지한다.
제2 서브 에이전트(202)는 제1 서브 에이전트(200)에서 구성된 스케줄에 따라 대상 시스템(110)에 대한 시뮬레이션 테스트를 수행하고, 상기 테스트 결과를 제1 서브 에이전트(200)로 전달한다. 제2 서브 에이전트(202)는 일반적인 웹 브라우저와 동일한 방식으로 대상 시스템(110)에 웹 페이지를 요청하거나 또는 브라우저 API 등을 다운로드하는 기능을 수행한다. 또한 제2 서브 에이전트(202)는 내부에 웹 브라우저 컨트롤을 포함하며, 상기 웹 브라우저 컨트롤은 제2 서브 에이전트(202)에서 웹 페이지 로딩이 완료되거나 또는 다른 페이지로 이동할 경우 그에 대응하는 이벤트(예를 들어, 도큐먼트 컴플리트 이벤트 (document complete event) 등)를 발생시킨다.
이와 같이 에이전트(106)가 제1 서브 에이전트(200) 및 제2 서브 에이전트(202)로 구성될 경우, 모니터링 대상 웹 서비스가 달라지는 경우에도 제1 서브 에이전트(200)의 설정만을 변경하면 되므로 다양한 웹 서비스에 효과적으로 대응할 수 있는 장점이 있다. 다만, 이는 단지 기능적인 분류로서, 실제 구현 시 제1 서브 에이전트(200) 및 제2 서브 에이전트(202)는 실질적으로 하나의 가상 머신 내에서 구동되는 단일 프로세스로 구성되거나 또는 필요에 따라 각각 별도의 프로세스로 구성될 수도 있다.
이하에서는, 상술한 구성을 가지는 웹 서비스 모니터링 시스템(100)에서의 구체적인 시뮬레이션 테스트 방법을 설명한다.
도 3은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 대상 시스템(110) 로그인 시뮬레이션 테스트(300) 과정을 설명하기 위한 도면이다.
제1 서브 에이전트(200)는 서비스 모듈(108)로부터 로그인 테스트를 위한 접속 시나리오 및 정책을 수신하고, 이에 따라 시뮬레이션 테스트의 스케줄을 구성한 뒤 상기 스케줄을 포함하는 로그인 테스트 요청을 제2 서브 에이전트(202)로 전송한다(302).
상기 로그인 테스트 요청을 수신한 수신한 제2 서브 에이전트(202)는 먼저 대상 시스템(110)과 기 설정된 세션이 존재하는지의 여부를 판단하고(304), 존재하는 경우 해당 세션을 종료한다(306). 만약 테스트 전 대상 시스템(110)에 이미 로그인이 완료되어 있는 경우에는 로그인 테스트가 제대로 진행되지 않기 때문이다.
다음으로, 제2 서브 에이전트(202)는 대상 시스템(110)의 로그인 웹 페이지에 접속하여 상기 로그인 웹 페이지의 콘텐트를 다운로드한다(308).
상기 콘텐트가 다운로드되면, 제2 서브 에이전트(202)는 다음으로 다운로드된 상기 콘텐트를 구조화하여 대상 시스템으로의 로그인을 위한 객체를 추출하고(310), 추출된 객체에 계정 정보를 부가하여 대상 시스템(110)으로 송신함으로써 대상 시스템(110)으로의 로그인을 요청한다(312).
이때, 상기 310 단계는, 로그인 웹 페이지의 콘텐트를 도큐먼트 오브젝트 모델(Document Object Model; DOM)을 이용하여 구조화하도록 구성될 수 있다. 일반적으로 웹 상에서 도큐먼트(document)란 HTML 또는 XML 등의 구조화된 문서를 의미하며, 도큐먼트의 구조화는 이러한 웹 상의 도큐먼트를 단순한 글자의 집합이 아닌 특정 개체(object)들의 집합으로 인식하는 것을 의미한다. 예를 들어, HTML의 경우 문서를 표현하기 위한 각각의 태그(TABLE, TR, DIV, SPAN 등)들을 개별적인 개체로 인식하여 구조화할 수 있다. 따라서 상술한 DOM 등을 이용할 경우 상기 로그인 웹 페이지로부터 로그인과 관련된 개체(INPUT BOX 등)을 분리해낼 수 있으며, 분리된 상기 개체에 기 설정된 계정 정보를 부가함으로써 실제 웹 브라우저가 없이도 대상 시스템(110)에 로그인을 요청할 수 있다.
이후, 제2 서브 에이전트(202)는 대상 시스템(110)으로의 로그인이 정상적으로 완료되었는지의 여부를 판단한다(314). 상기 로그인 정상 완료 여부의 판단은, 기 설정된 로그인 완료 웹 페이지가 정상적으로 로딩되는지의 여부에 따라 결정될 수 있다. 대부분의 웹 사이트는 사용자의 로그인 완료 시 특정 웹 페이지로 자동적으로 이동하도록 구성되며, 제2 서브 에이전트(202)는 제1 서브 에이전트(200)로부터 전달받은 스케줄에 따라 로그인 완료 시 이동하는 웹 페이지의 주소 정보를 가지고 있다. 이에 따라 제2 서브 에이전트(202)는 상기 로그인 요청 후 로딩되는 웹 페이지의 주소를 상기 정보와 비교하여 로그인 성공 여부를 알 수 있다. 이때, 제2 서브 에이전트(202)는 웹 브라우저 콘트롤로부터 웹 페이지의 다운로드 완료를 통지받은 경우 로그인 완료 페이지가 정상적으로 로딩된 것으로 판단하게 된다. 상기 웹 페이지의 다운로드 완료의 통지의 일례로는, 예를 들어 상기 웹 브라우저 콘트롤로부터 발생되는 도큐먼트 컴플리트 이벤트(Document complete event)를 들 수 있다. 다만, 본 발명은 이에 한정되는 것은 아니며 웹 브라우저의 종류에 따라 웹 페이지 다운로드 완료시 발생되는 이벤트의 종류는 상이할 수 있음에 유의한다.
만약 상기 314 단계의 판단 결과, 상기 로그인 완료 페이지가 정상적으로 로딩된 경우 제2 서브 에이전트(202)는 로그인 테스트가 성공한 것으로 판단하고 테스트 결과를 제1 서브 에이전트(200)로 송신한다(316). 그러나 만약 상기 로그인 완료 페이지가 정상적으로 로딩되지 않은 경우, 제2 서브 에이전트(202)는 로그인 테스트가 실패한 것으로 판단하고 테스트 결과를 제1 서브 에이전트(200)로 송신한다(318).
도 4는 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 브라우저 API 설치 시뮬레이션 테스트(400) 과정을 설명하기 위한 도면이다.
제1 서브 에이전트(200)는 서비스 모듈(108)로부터 브라우저 API 설치 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 수신하고, 이에 따라 시뮬레이션 테스트의 스케줄을 구성한 뒤 상기 스케줄을 포함하는 브라우저 API 설치 테스트 요청을 제2 서브 에이전트(202)로 전송한다(402).
상기 테스트 요청을 수신한 수신한 제2 서브 에이전트(202)는 먼저 기 설치된 브라우저 API가 존재하는지의 여부를 판단하고(404), 존재하는 경우 해당 브라우저 API를 제거한다(406). 만약 테스트 전 해당 브라우저 API가 이미 설치되어 있는 경우에는 테스트가 제대로 진행되지 않기 때문이다.
다음으로, 제2 서브 에이전트(202)는 대상 시스템(110)의 브라우저 API 설치 웹 페이지에 접속하고(408), 접속된 웹 페이지에 포함된 브라우저 API 설치 정보에 따라 브라우저 API 설치 파일을 다운로드하고, 다운로드된 브라우저 API의 설치 파일을 실행하여 브라우저 API를 가상 머신(112)에 설치한다(410).
이후, 제2 서브 에이전트(202)는 상기 브라우저 API가 정상적으로 설치되었는지의 여부를 판단한다(412). 액티브 X 등의 브라우저 API는 사용자 시스템에 정상적으로 설치 완료된 경우 기 설정된 특정 페이지(브라우저 API 설치 완료 웹 페이지로 칭함)로 이동하도록 구성되며, 제2 서브 에이전트(202)는 제1 서브 에이전트(200)로부터 전달받은 스케줄에 따라 상기 브라우저 API 설치 완료 웹 페이지의 주소 정보를 가지고 있다. 이에 따라 제2 서브 에이전트(202)는 상기 브라우저 API 설치 후 로딩되는 웹 페이지의 주소를 상기 정보와 비교하여 브라우저 API의 설치 성공 여부를 알 수 있다. 이때, 제2 서브 에이전트(202)는 웹 브라우저 콘트롤에서 웹 페이지의 다운로드 완료를 통지받은 경우 (예를 들어, 도큐먼트 컴플리트 이벤트(Document complete event)가 발생하는 경우) 브라우저 API 설치 완료 페이지가 정상적으로 로딩된 것으로 판단하게 된다.
만약 상기 412 단계의 판단 결과, 상기 브라우저 API 설치 완료 페이지가 정상적으로 로딩된 경우 제2 서브 에이전트(202)는 브라우저 API 설치 테스트가 성공한 것으로 판단하고 테스트 결과를 제1 서브 에이전트(200)로 송신한다(414). 그러나 만약 상기 브라우저 API 설치 완료 페이지가 정상적으로 로딩되지 않은 경우, 제2 서브 에이전트(202)는 브라우저 API 설치 테스트가 실패한 것으로 판단하고 대상 시스템(110)으로부터 수신한 설치 오류 웹 페이지 정보, 브라우저 API의 설치 위치, 브라우저 API의 버전 정보 및 레지스트리 정보를 포함하는 오류 메시지를 제1 서브 에이전트로 송신한다(416).
도 5는 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 어플리케이션 설치 시뮬레이션 테스트(500) 과정을 설명하기 위한 도면이다.
제1 서브 에이전트(200)는 서비스 모듈(108)로부터 어플리케이션 설치 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 수신하고, 이에 따라 시뮬레이션 테스트의 스케줄을 구성한 뒤 상기 스케줄을 포함하는 어플리케이션 설치 테스트 요청을 제2 서브 에이전트(202)로 전송한다(502).
상기 테스트 요청을 수신한 수신한 제2 서브 에이전트(202)는 먼저 기 설치된 브라우저 API 또는 어플리케이션이 존재하는지의 여부를 판단하고(504), 존재하는 경우 해당 브라우저 API 또는 어플리케이션을 제거한다(506). 만약 테스트 전 해당 어플리케이션이 가상 머신(112)에 이미 설치되어 있는 경우에는 테스트가 제대로 진행되지 않기 때문이다.
다음으로, 제2 서브 에이전트(202)는 대상 시스템(110)의 어플리케이션 설치 웹 페이지에 접속하고(508), 접속된 웹 페이지에 포함된 브라우저 API 설치 정보에 따라 브라우저 API 설치 파일을 다운로드하고, 다운로드된 브라우저 API의 설치 파일을 실행하여 브라우저 API를 가상 머신(112)에 설치한다(510). 이때 설치되는 상기 브라우저 API는 어플리케이션을 설치하기 위하여 사용되는 브라우저 API이다. 웹 브라우저 자체에서 특정 어플리케이션을 사용자 시스템에 직접 설치하거나 또는 실행하는 것은 불가능하므로, 본 발명에서와 같이 먼저 브라우저 API를 먼저 설치하여 실행하고, 실행된 상기 브라우저 API를 이용하여 어플리케이션을 설치 또는 실행하게 된다.
다음으로, 제2 서브 에이전트(202)는 설치된 브라우저 API에 포함된 어플리케이션 설치 정보에 따라 대상 시스템(110)으로부터 어플리케이션 설치 파일을 다운로드하고, 다운로드된 설치 파일을 실행하여 어플리케이션을 가상 머신(112)에 설치한다(512).
이후, 제2 서브 에이전트(202)는 상기 어플리케이션이 정상적으로 설치되었는지의 여부를 판단한다(514). 상기 510단계에서 설치된 상기 브라우저 API는 상기 어플리케이션 설치가 정상적으로 완료된 경우 이를 감지하여 기 설정된 특정 페이지(어플리케이션 설치 완료 웹 페이지로 칭함)로 이동하도록 구성되며, 제2 서브 에이전트(202)는 제1 서브 에이전트(200)로부터 전달받은 스케줄에 따라 상기 브라우저 API 설치 완료 웹 페이지의 주소 정보를 가지고 있다. 이에 따라 제2 서브 에이전트(202)는 상기 어플리케이션 설치 완료 후 상기 브라우저 API 설치 후 로딩되는 웹 페이지의 주소를 상기 정보와 비교하여 어플리케이션의 설치 성공 여부를 알 수 있다. 이때, 제2 서브 에이전트(202)는 웹 브라우저 콘트롤에서 웹 페이지의 다운로드 완료를 통지받은 경우 (예를 들어, 도큐먼트 컴플리트 이벤트(Document complete event)가 발생하는 경우) 어플리케이션 설치 완료 페이지가 정상적으로 로딩된 것으로 판단하게 된다.
또는, 제2 서브 에이전트(202)는 가상 머신(112)의 어플리케이션 설치 프로세스로부터 IPC(Inter Process Communication)을 통해 설치 정상 종료 메시지를 수신함으로써 상기 어플리케이션이 정상적으로 설치 완료된 것으로 판단할 수도 있다.
만약 상기 514 단계의 판단 결과, 상기 어플리케이션이 정상적으로 설치된 경우, 제2 서브 에이전트(202)는 어플리케이션 설치 테스트가 성공한 것으로 판단하고 테스트 결과를 제1 서브 에이전트(200)로 송신한다(516). 그러나 만약 상기 어플리케이션이 정상적으로 설치되지 않은 경우, 제2 서브 에이전트(202)는 어플리케이션 설치 테스트가 실패한 것으로 판단하고 대상 시스템(110)으로부터 수신한 설치 오류 웹 페이지 정보, 어플리케이션의 설치 위치, 브라우저 API의 버전 정보 및 레지스트리 정보를 포함하는 오류 메시지를 제1 서브 에이전트로 송신한다(518).
도 6은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 브라우저 API 실행 시뮬레이션 테스트(600) 과정을 설명하기 위한 도면이다. 즉, 본 테스트는 기 설치된 브라우저 API가 정상적으로 실행되는지 여부를 테스트하기 위한 것이다.
제1 서브 에이전트(200)는 서비스 모듈(108)로부터 브라우저 API 실행 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 수신하고, 이에 따라 시뮬레이션 테스트의 스케줄을 구성한 뒤 상기 스케줄을 포함하는 브라우저 API 실행 테스트 요청을 제2 서브 에이전트(202)로 전송한다(602).
상기 테스트 요청을 수신한 수신한 제2 서브 에이전트(202)는 대상 시스템(110)의 브라우저 API 탑재 웹 페이지에 접속하고(604), 접속된 웹 페이지에 포함된 브라우저 API 정보에 따라 브라우저 API를 가상 머신(112)에서 실행한다(606).
이후, 제2 서브 에이전트(202)는 상기 브라우저 API가 정상적으로 실행되는지의 여부를 판단한다(608). 상기 브라우저 API는 사용자 시스템에서 정상적으로 실행 완료된 경우 기 설정된 특정 페이지(브라우저 API 실행 완료 웹 페이지로 칭함)로 이동하도록 구성되며, 제2 서브 에이전트(202)는 제1 서브 에이전트(200)로부터 전달받은 스케줄에 따라 상기 브라우저 API 실행 완료 웹 페이지의 주소 정보를 가지고 있다. 이에 따라 제2 서브 에이전트(202)는 상기 브라우저 API 실행 후 로딩되는 웹 페이지의 주소를 상기 정보와 비교하여 브라우저 API의 실행 성공 여부를 알 수 있다. 이때, 제2 서브 에이전트(202)는 웹 브라우저 콘트롤에서 웹 페이지의 다운로드 완료를 통지받은 경우 (예를 들어, 도큐먼트 컴플리트 이벤트(Document complete event)가 발생하는 경우) 브라우저 API 실행 완료 페이지가 정상적으로 로딩된 것으로 판단하게 된다.
만약 상기 608 단계의 판단 결과, 상기 브라우저 API 실행 완료 페이지가 정상적으로 로딩된 경우 제2 서브 에이전트(202)는 브라우저 API 실행 테스트가 성공한 것으로 판단하고 테스트 결과를 제1 서브 에이전트(200)로 송신한다(610). 그러나 만약 상기 브라우저 API 실행 완료 페이지가 정상적으로 로딩되지 않은 경우, 제2 서브 에이전트(202)는 브라우저 API 실행 테스트가 실패한 것으로 판단하고 대상 시스템(110)으로부터 수신한 실행 오류 웹 페이지 정보, 브라우저 API의 설치 위치, 브라우저 API의 버전 정보 및 레지스트리 정보를 포함하는 오류 메시지를 제1 서브 에이전트로 송신한다(612).
도 7은 본 발명의 일 실시예에 따른 웹 서비스 모니터링 시스템(100)에서의 어플리케이션 실행 시뮬레이션 테스트(700) 과정을 설명하기 위한 도면이다. 즉, 본 테스트는 기 설치된 어플리케이션이 정상적으로 실행되는지 여부를 테스트하기 위한 것이다.
제1 서브 에이전트(200)는 서비스 모듈(108)로부터 어플리케이션 실행 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 수신하고, 이에 따라 시뮬레이션 테스트의 스케줄을 구성한 뒤 상기 스케줄을 포함하는 어플리케이션 실행 테스트 요청을 제2 서브 에이전트(202)로 전송한다(702).
상기 테스트 요청을 수신한 수신한 제2 서브 에이전트(202)는 대상 시스템(110)의 어플리케이션 실행 웹 페이지에 접속하고(704), 접속된 웹 페이지에 포함된 브라우저 API 실행 정보에 따라 브라우저 API를 가상 머신(112)에서 실행한다(706). 이때 실행되는 상기 브라우저 API는 어플리케이션을 실행하기 위하여 사용되는 브라우저 API이다. 전술한 바와 같이, 웹 브라우저 자체에서 특정 어플리케이션을 사용자 시스템에 직접 실행하는 것은 불가능하므로, 본 발명에서와 같이 먼저 브라우저 API를 먼저 실행하고, 실행된 상기 브라우저 API를 이용하여 어플리케이션을 실행하게 된다.
다음으로, 제2 서브 에이전트(202)는 실행된 브라우저 API에 포함된 어플리케이션 실행 정보에 따라 어플리케이션을 가상 머신(112)에서 실행한다(708).
이후, 제2 서브 에이전트(202)는 상기 어플리케이션이 정상적으로 실행되었는지의 여부를 판단한다(710). 상기 706단계에서 실행된 상기 브라우저 API는 상기 어플리케이션 실행이 정상적으로 완료된 경우 이를 감지하여 기 설정된 특정 페이지(어플리케이션 실행 완료 웹 페이지로 칭함)로 이동하도록 구성되며, 제2 서브 에이전트(202)는 제1 서브 에이전트(200)로부터 전달받은 스케줄에 따라 상기 브라우저 API 실행 완료 웹 페이지의 주소 정보를 가지고 있다. 이에 따라 제2 서브 에이전트(202)는 상기 어플리케이션 실행 완료 후 상기 브라우저 API 실행 후 로딩되는 웹 페이지의 주소를 상기 정보와 비교하여 어플리케이션의 실행 성공 여부를 알 수 있다. 이때, 제2 서브 에이전트(202)는 웹 브라우저 콘트롤에서 웹 페이지의 다운로드 완료를 통지받은 경우 (예를 들어, 도큐먼트 컴플리트 이벤트(Document complete event)가 발생하는 경우) 어플리케이션 실행 완료 페이지가 정상적으로 로딩된 것으로 판단하게 된다.
또는, 제2 서브 에이전트(202)는 가상 머신(112)의 어플리케이션 실행 프로세스로부터 IPC(Inter Process Communication)을 통해 정상 실행 메시지를 수신함으로써 상기 어플리케이션이 정상적으로 실행된 것으로 판단할 수도 있다. 그러나, 이와 달리 상기 웹 브라우저 컨트롤에서 상기 어플리케이션 실행 오류로 인한 이벤트(팝업 메시지 등)가 발생하거나, 또는 기 설정된 시간(Timeout) 기간 동안 상기 어플리케이션 실행 프로세서로부터 정상 실행 메시지가 수신되지 않거나 하는 경우에는 상기 어플리케이션이 정상적으로 실행되지 않은 것으로 판단할 수 있다.
만약 상기 710 단계의 판단 결과, 상기 어플리케이션이 정상적으로 실행된 경우, 제2 서브 에이전트(202)는 어플리케이션 실행 테스트가 성공한 것으로 판단하고 테스트 결과를 제1 서브 에이전트(200)로 송신한다(712). 그러나 만약 상기 어플리케이션이 정상적으로 실행되지 않은 경우, 제2 서브 에이전트(202)는 어플리케이션 실행 테스트가 실패한 것으로 판단하고 대상 시스템(110)으로부터 수신한 실행 오류 웹 페이지 정보, 어플리케이션의 설치 위치, 브라우저 API의 버전 정보, 레지스트리 정보 및 프로세스 정보를 포함하는 오류 메시지를 제1 서브 에이전트로 송신한다(714).
한편, 본 발명의 실시예는 본 명세서에서 기술한 방법들을 컴퓨터상에서 수행하기 위한 프로그램을 포함하는 컴퓨터 판독 가능 기록매체를 포함할 수 있다. 상기 컴퓨터 판독 가능 기록매체는 프로그램 명령, 로컬 데이터 파일, 로컬 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야에서 통상의 지식을 가진 자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광 기록 매체, 플로피 디스크와 같은 자기-광 매체, 및 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다.
이상에서 대표적인 실시예를 통하여 본 발명에 대하여 상세하게 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 상술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다.
그러므로 본 발명의 권리범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
[부호의 설명]
100: 웹 서비스 모니터링 시스템
102: 관리 모듈
104: 데이터베이스
106: 에이전트
108: 서비스 모듈
110: 대상 시스템
112: 가상 머신
200: 제1 서브 에이전트
202: 제2 서브 에이전트

Claims (43)

  1. 관리자로부터 대상 시스템의 시뮬레이션 테스트를 위한 접속 시나리오 및 정책을 입력받고, 상기 대상 시스템의 시뮬레이션 테스트 결과를 상기 관리자에게 출력하기 위한 인터페이스를 제공하는 관리 모듈;
    입력된 상기 정책 및 상기 접속 시나리오를 저장하는 데이터베이스; 및
    상기 데이터베이스에 저장된 상기 접속 시나리오 및 상기 정책에 따라 상기 대상 시스템에 접속하여 상기 대상 시스템에 대한 시뮬레이션 테스트를 수행하는 에이전트를 포함하는 웹 서비스 모니터링 시스템.
  2. 청구항 1에 있어서,
    상기 데이터베이스에 저장된 상기 접속 시나리오 및 상기 정책을 수신하여 상기 에이전트로 제공하고, 상기 에이전트로부터 수신된 테스트 결과를 상기 관리 모듈로 송신하는 서비스 모듈을 더 포함하는 웹 서비스 모니터링 시스템.
  3. 청구항 1에 있어서,
    상기 접속 시나리오는, 상기 대상 시스템의 접속 주소, 계정 정보, 설치 대상 브라우저 API 및 설치 대상 어플리케이션 정보 중 하나 이상을 포함하는, 웹 서비스 모니터링 시스템.
  4. 청구항 3에 있어서,
    상기 설치 대상 브라우저 API 및 설치 대상 어플리케이션 정보는, 상기 설치 대상 브라우저 API 및 설치 대상 어플리케이션의 설치 위치(디렉토리), 버전 정보 및 레지스트리 정보 중 하나 이상을 포함하는, 웹 서비스 모니터링 시스템.
  5. 청구항 1에 있어서,
    상기 정책은, 상기 대상 시스템의 모니터링 유형, 모니터링 주기, 모니터링 중 오류 발생시 재시도 횟수, 로그 기록 범위, 정책 변경 여부 확인 주기, 오류 발생 시 테스트 제한 시간(timeout) 및 접속 페이지 주소 수집 여부 중 하나 이상을 포함하는, 웹 서비스 모니터링 시스템.
  6. 청구항 1에 있어서,
    상기 에이전트는,
    상기 서비스 모듈로부터 수신된 접속 시나리오 및 상기 정책에 따라 상기 대상 시스템에 대한 모니터링 스케줄을 구성하는 제1 서브 에이전트; 및
    상기 제1 서브 에이전트에서 구성된 상기 스케줄에 따라 상기 대상 시스템에 대한 모니터링을 수행하는 제2 서브 에이전트를 포함하며,
    상기 제1 서브 에이전트는 상기 제2 서브 에이전트에서 수행된 상기 모니터링 결과를 상기 서비스 모듈로 송신하는, 웹 서비스 모니터링 시스템.
  7. 청구항 6에 있어서,
    상기 제1 서브 에이전트는, 상기 웹 서비스 모니터링 시스템 내에서 상기 제2 서브 에이전트가 점유하는 메모리가 기 설정된 값을 초과하는 경우 상기 제2 서브 에이전트를 재실행하는, 웹 서비스 모니터링 시스템.
  8. 청구항 6에 있어서,
    상기 제2 서브 에이전트는, 상기 제1 서브 에이전트에서 구성된 상기 모니터링 스케줄에 따라 상기 대상 시스템의 로그인 웹 페이지에 접속하고, 접속된 상기 로그인 웹 페이지를 구조화하여 상기 대상 시스템으로의 로그인을 위한 객체를 추출하며, 추출된 상기 객체에 계정 정보를 부가하여 상기 대상 시스템으로 송신함으로써 상기 대상 시스템으로의 로그인을 요청하는, 웹 서비스 모니터링 시스템.
  9. 청구항 8에 있어서,
    상기 제2 서브 에이전트는, 접속된 상기 웹 페이지를 도큐먼트 오브젝트 모델(Document Object Model; DOM)을 이용하여 구조화하는, 웹 서비스 모니터링 시스템.
  10. 청구항 8에 있어서,
    상기 제2 서브 에이전트는, 기 설정된 로그인 완료 웹 페이지가 정상적으로 로딩되는지의 여부에 따라 상기 로그인 요청이 정상적으로 완료되었는지의 여부를 판단하는, 웹 서비스 모니터링 시스템.
  11. 청구항 10에 있어서,
    상기 로그인 완료 웹 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 콘트롤에서 상기 웹 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 시스템.
  12. 청구항 6에 있어서,
    상기 제2 서브 에이전트는, 상기 제1 서브 에이전트에서 구성된 상기 모니터링 스케줄에 따라 상기 대상 시스템의 브라우저 API 설치 웹 페이지 또는 브라우저 API 실행 웹 페이지에 접속하고, 접속된 상기 웹 페이지에 포함된 브라우저 API 설치 정보에 따라 브라우저 API 설치 파일을 다운로드하여 가상 머신에 설치하거나 또는 기 설치된 브라우저 API를 실행하는, 웹 서비스 모니터링 시스템.
  13. 청구항 12에 있어서,
    상기 제2 서브 에이전트는, 기 설정된 완료 페이지가 정상적으로 로딩되는지의 여부에 따라 상기 브라우저 API가 정상적으로 설치 또는 실행되는지의 여부를 판단하는, 웹 서비스 모니터링 시스템.
  14. 청구항 13에 있어서,
    상기 완료 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 콘트롤에서 상기 완료 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 시스템.
  15. 청구항 13에 있어서,
    상기 판단 결과 상기 브라우저 API가 정상적으로 설치 또는 실행되지 않은 경우, 상기 제2 서브 에이전트는 상기 대상 시스템으로부터 수신한 오류 페이지 정보, 상기 브라우저 API의 설치 위치, 상기 브라우저 API의 버전 정보 및 레지스트리 정보를 포함하는 오류 메시지를 상기 제1 서브 에이전트로 송신하며,
    상기 제1 서브 에이전트는 수신된 상기 오류 메시지를 상기 접속 시나리오와 비교하고, 상기 비교 결과를 상기 서비스 모듈로 송신하는, 웹 서비스 모니터링 시스템.
  16. 청구항 6에 있어서,
    상기 제2 서브 에이전트는, 상기 제1 서브 에이전트에서 구성된 상기 모니터링 스케줄에 따라 상기 대상 시스템의 어플리케이션 설치 웹 페이지 또는 어플리케이션 실행 웹 페이지에 접속하고, 접속된 상기 웹 페이지에 포함된 어플리케이션 정보에 따라 상기 어플리케이션을 상기 가상 머신에 설치하거나 또는 기 설치된 상기 어플리케이션을 실행하는, 웹 서비스 모니터링 시스템.
  17. 청구항 16에 있어서,
    상기 제2 서브 에이전트는, 기 설정된 설치 완료 페이지가 정상적으로 로딩되거나 또는 상기 가상 머신의 어플리케이션 설치 프로세스로부터 설치 정상 종료 메시지가 수신되는지의 여부에 따라 상기 어플리케이션의 정상 설치 여부를 판단하는, 웹 서비스 모니터링 시스템.
  18. 청구항 16에 있어서,
    상기 제2 서브 에이전트는, 기 설정된 실행 완료 페이지가 정상적으로 로딩되거나 또는 상기 가상 머신의 어플리케이션 실행 프로세스로부터 상기 어플리케이션의 정상 실행 메시지가 수신되는지의 여부에 따라 상기 어플리케이션의 정상 실행 여부를 판단하는, 웹 서비스 모니터링 시스템.
  19. 청구항 17 또는 청구항 18에 있어서,
    상기 설치 완료 페이지 또는 상기 실행 완료 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 콘트롤에서 상기 설치 완료 페이지 또는 상기 실행 완료 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 시스템.
  20. 청구항 17에 있어서,
    상기 제2 서브 에이전트는, 상기 판단 결과 상기 어플리케이션이 정상적으로 설치 또는 실행되지 않은 경우 상기 대상 시스템으로부터 수신한 오류 페이지 정보, 상기 어플리케이션의 설치 위치, 상기 어플리케이션의 버전 정보, 레지스트리 정보 및 프로세스 정보를 포함하는 오류 메시지를 상기 제1 서브 에이전트로 송신하며,
    상기 제1 서브 에이전트는 수신된 상기 오류 메시지를 상기 접속 시나리오와 비교하고, 상기 비교 결과를 상기 서비스 모듈로 송신하는, 웹 서비스 모니터링 시스템.
  21. 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 로그인 테스트 요청을 수신하는 단계;
    상기 에이전트에서, 상기 대상 시스템의 로그인 웹 페이지에 접속하는 단계;
    상기 에이전트에서, 접속된 상기 로그인 웹 페이지를 구조화하여 상기 대상 시스템으로의 로그인을 위한 객체를 추출하는 단계;
    상기 에이전트에서, 추출된 상기 객체에 계정 정보를 부가하여 상기 대상 시스템으로 송신하여 상기 대상 시스템으로의 로그인을 요청하는 단계; 및
    상기 에이전트에서, 상기 대상 시스템으로의 로그인이 정상적으로 완료되었는지의 여부를 판단하는 단계를 포함하는 웹 서비스 모니터링 방법.
  22. 청구항 21에 있어서,
    상기 객체를 추출하는 단계는, 상기 로그인 웹 페이지를 도큐먼트 오브젝트 모델(Document Object Model; DOM)을 이용하여 구조화하는, 웹 서비스 모니터링 방법.
  23. 청구항 21에 있어서,
    상기 로그인이 정상적으로 완료되었는지의 여부를 판단하는 단계는, 기 설정된 로그인 완료 웹 페이지가 정상적으로 로딩되는지의 여부에 따라 상기 로그인이 정상적으로 완료되었는지의 여부를 판단하는, 웹 서비스 모니터링 방법.
  24. 청구항 23에 있어서,
    상기 로그인 완료 웹 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 콘트롤에서 상기 로그인 완료 웹 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 방법.
  25. 청구항 21에 있어서,
    상기 로그인 웹 페이지에 접속하는 단계의 수행 전, 상기 에이전트에서 상기 대상 시스템과 기 설정된 세션이 존재하는지의 여부를 판단하는 단계; 및
    세션 존재 여부의 판단 결과 기 설정된 세션이 존재하는 경우, 상기 에이전트에서 상기 세션을 종료하는 단계를 더 포함하는, 웹 서비스 모니터링 방법.
  26. 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 브라우저 API 설치 테스트 요청을 수신하는 단계;
    상기 에이전트에서, 상기 대상 시스템의 브라우저 API 설치 웹 페이지에 접속하는 단계;
    상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 설치 정보에 따라 브라우저 API 설치 파일을 다운로드하고, 다운로드된 상기 브라우저 API의 설치 파일을 실행하여 상기 브라우저 API를 가상 머신에 설치하는 단계; 및
    상기 에이전트에서, 상기 브라우저 API가 정상적으로 설치되었는지의 여부를 판단하는 단계를 포함하는 웹 서비스 모니터링 방법.
  27. 청구항 26에 있어서,
    상기 브라우저 API 설치 웹 페이지에 접속하는 단계의 수행 전, 상기 에이전트에서 기 설치된 상기 브라우저 API가 존재하는지의 여부를 판단하는 단계; 및
    기 설치된 브라우저 API가 존재하는 경우, 상기 에이전트에서 기 설치된 상기 브라우저 API를 제거하는 단계를 더 포함하는, 웹 서비스 모니터링 방법.
  28. 청구항 26에 있어서,
    상기 브라우저 API가 정상적으로 설치되었는지의 여부를 판단하는 단계는, 기 설정된 브라우저 API 설치 완료 웹 페이지가 정상적으로 로딩되는지의 여부에 따라 상기 브라우저 API가 정상적으로 설치되었는지의 여부를 판단하는, 웹 서비스 모니터링 방법.
  29. 청구항 26에 있어서,
    상기 브라우저 API 설치 완료 웹 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 콘트롤에서 상기 설치 완료 웹 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 방법.
  30. 청구항 26에 있어서,
    상기 판단 결과 상기 브라우저 API가 정상적으로 설치되지 않은 경우, 상기 에이전트는 상기 대상 시스템으로부터 수신한 설치 오류 웹 페이지 정보, 상기 브라우저 API의 설치 위치, 상기 브라우저 API의 버전 정보 및 레지스트리 정보를 포함하는 오류 메시지를 출력하는, 웹 서비스 모니터링 방법.
  31. 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 어플리케이션 설치 테스트 요청을 수신하는 단계;
    상기 에이전트에서, 상기 대상 시스템의 어플리케이션 설치 웹 페이지에 접속하는 단계;
    상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 설치 정보에 따라 브라우저 API를 가상 머신에 설치하는 단계;
    상기 에이전트에서, 설치된 상기 브라우저 API에 포함된 어플리케이션 설치 정보에 따라 상기 대상 시스템으로부터 어플리케이션 설치 파일을 다운로드하고, 다운로드된 상기 설치 파일을 실행하여 상기 어플리케이션을 상기 가상 머신에 설치하는 단계; 및
    상기 에이전트에서, 상기 어플리케이션이 정상적으로 설치되었는지의 여부를 판단하는 단계를 포함하는 웹 서비스 모니터링 방법.
  32. 청구항 31에 있어서,
    상기 브라우저 API 설치 웹 페이지에 접속하는 단계의 수행 전, 상기 에이전트에서 기 설치된 상기 어플리케이션이 존재하는지의 여부를 판단하는 단계; 및
    기 설치된 어플리케이션이 존재하는 경우, 상기 에이전트에서 기 설치된 상기 상기 어플리케이션을 제거하는 단계를 더 포함하는, 웹 서비스 모니터링 방법.
  33. 청구항 31에 있어서,
    상기 어플리케이션이 정상적으로 설치되었는지의 여부를 판단하는 단계는,
    기 설정된 어플리케이션 설치 완료 웹 페이지가 정상적으로 로딩되거나, 또는 상기 가상 머신의 어플리케이션 설치 프로세스로부터 설치 정상 종료 메시지가 수신되는 경우, 상기 어플리케이션이 정상적으로 설치된 것으로 판단하는, 웹 서비스 모니터링 방법.
  34. 청구항 33에 있어서,
    상기 브라우저 어플리케이션 설치 완료 웹 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 상기 설치 완료 웹 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 방법.
  35. 청구항 31에 있어서,
    상기 판단 결과 상기 어플리케이션이 정상적으로 설치되지 않은 경우, 상기 에이전트는 상기 대상 시스템으로부터 수신한 설치 오류 웹 페이지 정보, 상기 어플리케이션의 설치 위치, 상기 어플리케이션의 버전 정보 및 레지스트리 정보를 포함하는 오류 메시지를 출력하는, 웹 서비스 모니터링 방법.
  36. 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 브라우저 API 실행 테스트 요청을 수신하는 단계;
    상기 에이전트에서, 상기 대상 시스템의 브라우저 API 탑재 웹 페이지에 접속하는 단계;
    상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 정보에 따라 브라우저 API를 실행하는 단계; 및
    상기 에이전트에서, 상기 브라우저 API가 정상적으로 실행되는지의 여부를 판단하는 단계를 포함하는 웹 서비스 모니터링 방법.
  37. 청구항 36에 있어서,
    상기 브라우저 API가 정상적으로 실행되는지의 여부를 판단하는 단계는, 기 설정된 브라우저 API 실행 완료 웹 페이지가 정상적으로 로딩되는지의 여부에 따라 상기 브라우저 API가 정상적으로 실행되는지의 여부를 판단하는, 웹 서비스 모니터링 방법.
  38. 청구항 37에 있어서,
    상기 브라우저 API 실행 완료 웹 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 콘트롤에서 상기 실행 완료 웹 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 방법.
  39. 청구항 36에 있어서,
    상기 판단 결과 상기 브라우저 API가 정상적으로 실행되지 않은 경우, 상기 에이전트는 상기 대상 시스템으로부터 수신한 실행 오류 웹 페이지 정보, 상기 브라우저 API의 설치 위치, 상기 브라우저 API의 버전 정보 및 레지스트리 정보를 포함하는 오류 메시지를 출력하는, 웹 서비스 모니터링 방법.
  40. 웹 서비스 모니터링 시스템의 에이전트에서, 대상 시스템의 어플리케이션 실행 테스트 요청을 수신하는 단계;
    상기 에이전트에서, 상기 대상 시스템의 어플리케이션 탑재 웹 페이지에 접속하는 단계;
    상기 에이전트에서, 접속된 상기 웹 페이지에 포함된 브라우저 API 정보에 따라 브라우저 API를 실행하는 단계;
    상기 에이전트에서 실행된 상기 브라우저 API에 포함된 어플리케이션 정보에 따라 어플리케이션을 실행하는 단계; 및
    상기 에이전트에서, 상기 어플리케이션이 정상적으로 실행되는지의 여부를 판단하는 단계를 포함하는 웹 서비스 모니터링 방법.
  41. 청구항 40에 있어서,
    상기 어플리케이션이 정상적으로 실행되는지의 여부를 판단하는 단계는, 기 설정된 어플리케이션 실행 완료 웹 페이지가 정상적으로 로딩되거나, 또는 상기 가상 머신의 어플리케이션 구동 프로세스로부터 상기 어플리케이션의 정상 구동 메시지가 수신되는 경우, 상기 어플리케이션이 정상적으로 실행된 것으로 판단하는, 웹 서비스 모니터링 방법.
  42. 청구항 41에 있어서,
    상기 브라우저 어플리케이션 실행 완료 웹 페이지가 정상적으로 로딩되는지의 여부는 상기 에이전트에 포함된 웹 브라우저 콘트롤에서 상기 실행 완료 웹 페이지의 다운로드 완료가 통지되는지의 여부에 따라 판단되는, 웹 서비스 모니터링 방법.
  43. 청구항 40에 있어서,
    상기 판단 결과 상기 어플리케이션이 정상적으로 실행되지 않은 경우, 상기 에이전트는 상기 대상 시스템으로부터 수신한 실행 오류 웹 페이지 정보, 상기 어플리케이션의 설치 위치, 상기 어플리케이션의 버전 정보, 레지스트리 정보 및 프로세스 정보를 포함하는 오류 메시지를 출력하는, 웹 서비스 모니터링 방법.
PCT/KR2013/004140 2012-05-11 2013-05-10 웹 서비스 모니터링 시스템 및 방법 WO2013169059A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2012-0050200 2012-05-11
KR1020120050200A KR101691245B1 (ko) 2012-05-11 2012-05-11 웹 서비스 모니터링 시스템 및 방법

Publications (1)

Publication Number Publication Date
WO2013169059A1 true WO2013169059A1 (ko) 2013-11-14

Family

ID=49535385

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2013/004140 WO2013169059A1 (ko) 2012-05-11 2013-05-10 웹 서비스 모니터링 시스템 및 방법

Country Status (4)

Country Link
US (1) US9229844B2 (ko)
KR (1) KR101691245B1 (ko)
CN (1) CN103391222B (ko)
WO (1) WO2013169059A1 (ko)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105471665A (zh) * 2014-08-21 2016-04-06 北京奇虎科技有限公司 网站功能测试方法及系统、网站服务器
WO2017014743A1 (en) * 2015-07-20 2017-01-26 Hewlett Packard Enterprise Development Lp Web application adjustment for different browsers
CN106569940A (zh) * 2016-11-04 2017-04-19 珠海金山网络游戏科技有限公司 一种远程终端可定制日志的查看方法及系统
CN106897387B (zh) * 2017-01-23 2020-11-24 北京思特奇信息技术股份有限公司 基于动作模拟的业务探测方法
CN107273284B (zh) * 2017-04-20 2020-12-25 北京星选科技有限公司 测试应用程序性能的方法及装置
JP6785810B2 (ja) * 2018-03-01 2020-11-18 株式会社日立製作所 シミュレーター、シミュレーション装置、および、シミュレーション方法
KR102530364B1 (ko) * 2018-05-28 2023-05-08 삼성에스디에스 주식회사 노드 분석 방법 및 장치
KR102547071B1 (ko) * 2018-06-18 2023-06-22 삼성에스디에스 주식회사 관제 맵 가중치 제어 방법 및 그 장치
KR102136583B1 (ko) * 2018-09-12 2020-07-22 숭실대학교산학협력단 클라우드 환경 모니터링 시스템 및 방법
CN112463580A (zh) * 2019-09-09 2021-03-09 英业达科技有限公司 基于虚拟化装置的测试系统及其方法
KR102303182B1 (ko) * 2020-02-13 2021-09-16 주식회사 카카오뱅크 테스트 자동화 네트워크 시스템 및 테스트 자동화 방법
CN113032258B (zh) * 2021-03-22 2022-11-25 北京百度网讯科技有限公司 一种电子地图的测试方法、装置、电子设备及存储介质
CN113076234B (zh) * 2021-04-02 2022-07-12 多点(深圳)数字科技有限公司 一种html5页面实时监测的方法
KR102618417B1 (ko) * 2023-05-10 2023-12-28 쿠팡 주식회사 정보를 제공하는 전자 장치의 동작 방법 및 이를 지원하는 전자 장치
CN117093466B (zh) * 2023-10-19 2024-01-16 腾讯科技（深圳）有限公司 性能测试方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010086844A (ko) * 2000-03-03 2001-09-15 심재범 인터넷 서비스 자동화 시스템
JP2009087352A (ja) * 2007-10-01 2009-04-23 Fujitsu Ltd ソフトウェアアプリケーションにおける欠陥検出のための設定可能なウェブサービスシステム及び方法
KR100948217B1 (ko) * 2005-03-14 2010-03-18 콸콤 인코포레이티드 무선 장치상에서 프로덕트 승인을 테스트하기 위한 장치 및방법
KR20100051633A (ko) * 2007-06-28 2010-05-17 누스타, 인크. 웹서비스 트랜잭션을 모니터링하는 방법
WO2012019639A1 (en) * 2010-08-10 2012-02-16 International Business Machines Corporation A method and system to automatically testing a web application

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110191750A1 (en) * 1999-10-05 2011-08-04 Borland Software Corporation Methods and systems for displaying distributed computing components using symbols
WO2001082071A1 (en) * 2000-04-21 2001-11-01 Togethersoft Corporation Methods and systems for supporting and deploying distributed computing components
US20040117479A1 (en) * 2001-03-28 2004-06-17 Harald Jellum Method and arrangement for web information monitoring
US20060031938A1 (en) * 2002-10-22 2006-02-09 Unho Choi Integrated emergency response system in information infrastructure and operating method therefor
US7330887B1 (en) * 2003-01-06 2008-02-12 Cisco Technology, Inc. Method and system for testing web-based applications
US8141043B2 (en) * 2005-01-11 2012-03-20 Worksoft, Inc. Automated business process testing that spans multiple platforms or applications
US8037106B2 (en) * 2005-03-02 2011-10-11 Computer Associates Think, Inc. Method and system for managing information technology data
US7770068B2 (en) * 2005-06-01 2010-08-03 Neustar, Inc. Systems and methods for website monitoring and load testing via simulation
US7356590B2 (en) * 2005-07-12 2008-04-08 Visible Measures Corp. Distributed capture and aggregation of dynamic application usage information
GB2434461A (en) * 2006-01-24 2007-07-25 Hawkgrove Ltd System for monitoring the performance of the components of a software system by detecting the messages between the components and decoding them
CN101193007A (zh) * 2006-11-28 2008-06-04 国际商业机器公司 统一资源定位符命令测试方法、场景测试方法和相应设备
US20090235282A1 (en) * 2008-03-12 2009-09-17 Microsoft Corporation Application remote control
US20090300423A1 (en) * 2008-05-28 2009-12-03 James Michael Ferris Systems and methods for software test management in cloud-based network
KR20100041447A (ko) * 2008-10-14 2010-04-22 삼성전자주식회사 테스트 자동화 장치 및 테스트 자동화 방법
CN101383845B (zh) * 2008-10-15 2011-12-21 北京邮电大学 综合业务接入装置、系统及其控制方法
US8316127B2 (en) * 2009-11-25 2012-11-20 Sap Ag Determining duration of user interaction
US9576303B2 (en) * 2011-06-17 2017-02-21 Google Inc. Advertisements in view
US8661125B2 (en) * 2011-09-29 2014-02-25 Microsoft Corporation System comprising probe runner, monitor, and responder with associated databases for multi-level monitoring of a cloud service
US8938719B2 (en) * 2011-11-30 2015-01-20 Tata Consultancy Services Limited System and method for performance assurance of applications
CN103309800B (zh) * 2012-03-15 2016-04-13 腾讯科技（深圳）有限公司 一种网页自动化测试方法和系统
US9684587B2 (en) * 2012-10-12 2017-06-20 Vmware, Inc. Test creation with execution
US20140195858A1 (en) * 2013-01-07 2014-07-10 Appvance Inc. Methods, systems, and non-transitory machine-readable medium for performing a web browser to web browser testing of a computer software application

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010086844A (ko) * 2000-03-03 2001-09-15 심재범 인터넷 서비스 자동화 시스템
KR100948217B1 (ko) * 2005-03-14 2010-03-18 콸콤 인코포레이티드 무선 장치상에서 프로덕트 승인을 테스트하기 위한 장치 및방법
KR20100051633A (ko) * 2007-06-28 2010-05-17 누스타, 인크. 웹서비스 트랜잭션을 모니터링하는 방법
JP2009087352A (ja) * 2007-10-01 2009-04-23 Fujitsu Ltd ソフトウェアアプリケーションにおける欠陥検出のための設定可能なウェブサービスシステム及び方法
WO2012019639A1 (en) * 2010-08-10 2012-02-16 International Business Machines Corporation A method and system to automatically testing a web application

Also Published As

Publication number Publication date
CN103391222B (zh) 2017-05-31
KR20130126251A (ko) 2013-11-20
KR101691245B1 (ko) 2017-01-09
US9229844B2 (en) 2016-01-05
US20130305096A1 (en) 2013-11-14
CN103391222A (zh) 2013-11-13

Similar Documents

Publication Publication Date Title
WO2013169059A1 (ko) 웹 서비스 모니터링 시스템 및 방법
US10235524B2 (en) Methods and apparatus for identifying and removing malicious applications
US6275942B1 (en) System, method and computer program product for automatic response to computer system misuse using active response modules
CN102110197B (zh) 多核处理器的计算环境中实现tpm的方法及其系统
CN109194606B (zh) 攻击检测系统、方法、计算机设备及存储介质
WO2018182126A1 (ko) 안전 소프트웨어 인증 시스템 및 방법
CN110943984B (zh) 一种资产安全保护方法及装置
WO2019198885A1 (ko) 블록체인 기반의 다수의 서비스 노드를 사용하는 탈중앙화 서비스 플랫폼
KR102231726B1 (ko) 취약점 진단방법 및 이를 위한 진단장치
US20110219454A1 (en) Methods of identifying activex control distribution site, detecting security vulnerability in activex control and immunizing the same
CN114254304A (zh) 容器安全入侵检测方法、装置、计算机设备及存储介质
WO2016111525A1 (ko) 소스코드 이관제어 방법 및 이를 위한 컴퓨터 프로그램, 그 기록매체
US20050005101A1 (en) Kernel cryptographic module signature verification system and method
EP4184357A1 (en) Malware detection based on user interactions
CN114065196A (zh) Java内存马检测方法、装置、电子设备与存储介质
WO2013073762A1 (en) Method and apparatus for providing and collecting data about abnormal termination of program
CN115203054A (zh) 一种虚拟化芯片测试系统
CN108809950B (zh) 一种基于云端影子系统的无线路由器保护方法和系统
CN112765611B (zh) 一种越权漏洞检测方法、装置、设备及存储介质
CN109189652A (zh) 一种封闭网络终端行为数据的采集方法及系统
WO2016200045A1 (ko) 하드웨어 기반의 커널 코드 삽입 공격 탐지 장치 및 그 방법
CN117032894A (zh) 容器安全状态检测方法、装置、电子设备及存储介质
WO2023144805A1 (en) Techniques for cloud detection and response from cloud logs utilizing a security graph
CN115454856A (zh) 多应用的安全检测方法、装置、介质及电子设备
RU2697951C2 (ru) Система и способ прекращения работы функционально ограниченного приложения, взаимосвязанного с веб-сайтом, запускаемого без установки

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13787470

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205N DATED 26.02.2015)

122 Ep: pct application non-entry in european phase

Ref document number: 13787470

Country of ref document: EP

Kind code of ref document: A1