KR101111956B1 - System for providing substance about monitoring of computing device and method thereof - Google Patents

System for providing substance about monitoring of computing device and method thereof Download PDF

Info

Publication number
KR101111956B1
KR101111956B1 KR1020110108730A KR20110108730A KR101111956B1 KR 101111956 B1 KR101111956 B1 KR 101111956B1 KR 1020110108730 A KR1020110108730 A KR 1020110108730A KR 20110108730 A KR20110108730 A KR 20110108730A KR 101111956 B1 KR101111956 B1 KR 101111956B1
Authority
KR
South Korea
Prior art keywords
monitoring
information
computing device
application program
usage
Prior art date
Application number
KR1020110108730A
Other languages
Korean (ko)
Inventor
김백규
Original Assignee
(주)지란지교소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)지란지교소프트 filed Critical (주)지란지교소프트
Priority to KR1020110108730A priority Critical patent/KR101111956B1/en
Application granted granted Critical
Publication of KR101111956B1 publication Critical patent/KR101111956B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3438—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/433—Query formulation using audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs

Abstract

PURPOSE: A monitoring content providing system of a computing device and a method thereof are provided to conveniently recognize the usage of the computing device by identifying the usage content of the device with a moving picture. CONSTITUTION: A target computing device(10) captures a performing screen according to an established rule for an application program to generate a monitoring image. When the application program is terminated, the computing device generates the usage information of performing the application program. A monitoring server(50) uses the monitoring image and the usage information to generate a usage explanation information and a monitoring moving picture in which the monitoring images are arranged in a time sequence.

Description

컴퓨팅 장치의 모니터링 내용 제공 시스템 및 방법{System for providing substance about monitoring of computing device and method thereof}System for providing substance about monitoring of computing device and method

본 발명은 컴퓨팅 장치의 모니터링 내용 제공에 관한 것으로서, 좀 더 상세하게는 컴퓨팅 장치의 사용을 모니터링하고 그 내용을 제공하는 시스템 및 방법에 관한 것이다.
The present invention relates to providing monitoring content of a computing device, and more particularly, to a system and method for monitoring the use of a computing device and providing the content.

근래에는 직장뿐 아니라 대부분의 집에 컴퓨터가 보급되어 있다. 대다수의 사람들이 컴퓨터를 이용하여 인터넷, 게임, 동영상 시청 등뿐 아니라 업무에 사용하기도 한다. 하지만, 최근에는 인터넷의 발달로 학생들이 유해한 콘텐츠를 너무나도 쉽게 접할 수 있게 되어, 어린 자녀를 둔 부모들은 자녀의 컴퓨터 사용을 모니터링하거나 음란 영상물 또는 음란사이트로의 접속을 예방하고자 하는 욕구가 높아지고 있다.In recent years, computers are available in most homes as well as at work. The vast majority of people use their computers for work as well as the Internet, games and video. However, in recent years, the development of the Internet has made it possible for students to easily access harmful contents, and parents with young children are increasing their desire to monitor their children's computer use or prevent access to pornographic images or pornographic sites.

또한, 사무실에서 근무하는 직장인들 대다수도 컴퓨터를 이용하여 작업을 수행하는데, 한글, MS워드 등의 워드 프로그램, 파워포인트 프로그램 등의 업무용 어플리케이션(application) 프로그램뿐 아니라, 익스플로러(explorer), 파이어폭스(FireFox) 등 인터넷 이용을 위한 인터넷 탐색 프로그램(웹 브라우저) 등 다양한 어플리케이션 프로그램을 컴퓨팅 장치를 이용하여 활용하고 있다.In addition, the majority of office workers who work in the office to perform the work using a computer, as well as business application programs such as Word program, such as Hangul, MS Word, PowerPoint program, explorer, Firefox ( Various application programs, such as Internet browsers (web browsers) for using the Internet, such as FireFox) are being utilized by computing devices.

최근에는 다양해진 어플리케이션 프로그램의 범람으로 업무시간에도 업무와는 상관없는 개인적인 용도로 메신저 등의 어플리케이션 프로그램을 이용하는 직장인들이 많아지고 있다. 특히, MS사의 익스플로러(explorer)와 같은 웹 브라우저를 이용하여 인터넷 쇼핑몰, 온라인 신문사이트 등의 웹사이트(website)에 접속하는 직장인들이 많아져, 직원들의 인터넷 사이트 접속을 감시하고 제어하는 기업들이 많아지고 있다. 예를 들어, 업무시간에는 싸이월드(www.cyworld.co.kr)와 같은 특정 사이트(site)에 접속하지 못하도록, 사내 네트워크의 통신데이터를 감시(monitoring)하여 해당 사이트의 접속주소인 URL((uniform resource locator)을 통한 인터넷 통신을 차단하는 기능을 설정하기도 한다.Recently, due to the overflow of various application programs, office workers are increasingly using application programs such as messengers for personal purposes irrespective of their work hours. In particular, many office workers access websites such as Internet shopping malls and online newspaper sites using a web browser such as Microsoft's Explorer, and many companies monitor and control employees' access to Internet sites. have. For example, in order to prevent access to a specific site such as Cyworld (www.cyworld.co.kr) during business hours, the communication data of the company network is monitored and URL (( It may also set the ability to block Internet communication through a uniform resource locator.

하지만, 종래에는 단순히 인터넷 URL을 이용한 특정 사이트로의 접속을 차단할 수 있을 뿐, 해당 컴퓨터 사용자들이 업무시간 동안 컴퓨터를 이용한 어떠한 작업 즉 프로그램을 구동하고 있는지를 면밀히 감시하기는 쉽지 않았다. However, in the related art, simply access to a specific site using an Internet URL can be blocked, and it is not easy to closely monitor what operations the computer users are running during the working hours, that is, programs.

물론, 기존에도 사용자가 이용한 프로그램에 따른 로그(log)파일이 생성되기는 하나, 해당 로그파일을 통해 해당 사용자가 어떠한 프로그램을 이용했으며 어떠한 작업을 수행했는지에 대한 이력을 알기 위해서는 로그파일에 따른 로데이터(raw data)를 일일이 분석해야 하는 불편이 존재하였으며, 더욱이 사용자가 각 프로그램을 주로 어떠한 용도로 또한 얼마만큼의 시간 동안 사용했는지 등에 대한 사용 경향(pattern)을 알 수가 없다.
Of course, the log file is generated according to the program used by the user, but the log data according to the log file to know the history of which program was used and what the user used through the log file There has been inconvenience of having to analyze raw data one by one, and furthermore, it is impossible to know the usage pattern of the user mainly using each program for what purpose and for how long.

따라서, 본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로서, 컴퓨팅 장치를 어떠한 용도로 사용하는지를 한눈에 알아보기 편리하도록, 컴퓨팅 장치의 화면을 캡처한 이미지를 이용하여 생성된 동영상을 모니터링 결과로서 제공하는 컴퓨팅 장치의 모니터링 내용 제공 시스템 및 방법을 제공하기 위한 것이다.Accordingly, the present invention has been made to solve the above-described problem, and provides a video generated by using a screen capture image of the computing device as a monitoring result so that it is easy to see what the computing device is used for at a glance. The present invention provides a system and method for providing monitoring contents of a computing device.

또한, 본 발명은 컴퓨팅 장치의 사용 화면을 캡처한 이미지와 함께 사용 내역에 대한 정보가 함께 포함되도록 하는 동영상을 제공하는 컴퓨팅 장치의 모니터링 내용 제공 시스템 및 방법을 제공하기 위한 것이다.In addition, the present invention is to provide a system and method for providing monitoring contents of a computing device that provides a video including the information on the usage history together with the image capturing the screen of the computing device.

본 발명의 다른 목적들은 이하에 서술되는 바람직한 실시예를 통하여 보다 명확해질 것이다.
Other objects of the present invention will become more apparent through the following preferred embodiments.

본 발명의 일 측면에 따르면, 응용 프로그램이 실행되면, 상기 응용프로그램에 미리 설정된 규정에 따라 실행화면을 캡처(capture)하여 하나 이상의 모니터링 이미지를 생성하고, 상기 응용 프로그램이 종료되면 상기 응용 프로그램의 실행정보를 이용한 사용내용정보를 생성하는 대상 컴퓨팅장치; 및 상기 사용내용정보에 따른 사용설명정보와 상기 모니터링 이미지가 포함되는 모니터링 동영상을 생성하는 모니터링 서버를 포함하는 모니터링 내용 제공 시스템이 제공된다.According to an aspect of the present invention, when an application program is executed, the execution screen is captured according to a predetermined rule in the application program to generate one or more monitoring images, and when the application program is terminated, the execution of the application program is executed. A target computing device generating usage content information using the information; And a monitoring server generating a monitoring video including the usage description information and the monitoring image according to the usage content information.

여기서, 상기 대상 컴퓨팅장치는 실행되는 응용프로그램의 종류에 따라 전체화면 또는 실행창 중 어느 하나를 캡처하여 상기 모니터링 이미지를 생성할 수 있다.Here, the target computing device may generate the monitoring image by capturing any one of the full screen and the execution window according to the type of the application program to be executed.

또한, 상기 대상 컴퓨팅장치는 상기 응용프로그램의 명칭, 실행 시작 시간, 총 실행 시간, 실행파일명, 파일 저장 위치, 접속 사이트명, 검색어 중 어느 하나 이상이 포함되도록 상기 사용내용정보를 생성할 수 있다.In addition, the target computing device may generate the usage content information to include any one or more of the name, execution start time, total execution time, execution file name, file storage location, access site name, and search word of the application program.

또한, 상기 모니터링 서버는 상기 모니터링 이미지가 포함된 이미지를 프레임으로 가지며 상기 사용설명정보를 자막 또는 오디오 형태로 갖도록 상기 모니터링 동영상을 생성할 수 있다.In addition, the monitoring server may generate the monitoring video to have an image including the monitoring image in a frame and the usage description information in a subtitle or audio form.

또한, 상기 대상 컴퓨팅장치는 상기 응용프로그램이 웹브라우저인 경우 접속되는 웹페이지 마다 상기 모니터링 이미지를 생성할 수 있으며, 상기 모니터링 서버는 상기 모니터링 동영상 생성 시 상기 웹페이지에 따른 모니터링 이미지에 상응하는 프레임에 상기 웹페이지로의 접속정보를 링크(link)시킬 수 있다.In addition, the target computing device may generate the monitoring image for each web page accessed when the application program is a web browser, and the monitoring server generates a monitoring image in a frame corresponding to the monitoring image according to the web page when the monitoring video is generated. It is possible to link the access information to the web page.

또한, 상기 모니터링 서버는 상기 모니터링 동영상을 생성할 때, 파일을 실행하는 응용프로그램에 따른 모니터링 이미지에 상응하는 프레임에는 상기 파일로의 접속정보를 링크(link)시킬 수 있다.In addition, when generating the monitoring video, the monitoring server may link the access information to the file in a frame corresponding to the monitoring image according to the application program executing the file.

또한, 상기 모니터링 서버는 상기 모니터링 동영상을 생성할 때, 상기 사용내용정보를 참조하여 상기 모니터링 이미지에 따른 프레임의 노출 시간을 설정할 수 있다.In addition, when generating the monitoring video, the monitoring server may set the exposure time of the frame according to the monitoring image with reference to the usage content information.

또한, 상기 모니터링 서버는 미리 설정된 재생 시간에 상응하도록 각 모니터링 이미지에 따른 프레임의 노출 시간을 설정하여 상기 모니터링 동영상을 생성할 수 있다.
The monitoring server may generate the monitoring video by setting an exposure time of a frame according to each monitoring image to correspond to a preset playback time.

본 발명의 다른 측면에 따르면, 대상 컴퓨팅장치의 사용에 대한 모니터링 내용을 제공하는 시스템에서의 모니터링 내용 제공 방법에 있어서, 대상 컴퓨팅장치에서 응용프로그램이 실행되면, 상기 응용프로그램에 미리 설정된 규정에 따라 전체화면 또는 실행창을 캡처하여 하나 이상의 모니터링 이미지를 생성하는 단계; 상기 응용 프로그램이 종료되면 상기 응용 프로그램의 실행정보를 이용한 사용내용정보를 생성하는 단계; 및 미리 설정된 기준에 따른 기간 동안에 생성된 상기 모니터링 이미지 및 상기 사용내용정보를 이용하여, 상기 사용내용정보에 따른 사용설명정보와 상기 모니터링 이미지가 포함되는 모니터링 동영상을 생성하는 단계를 포함하는 모니터링 내용 제공 방법 및 그 방법을 실행하는 프로그램이 기록된 기록매체가 제공된다.
According to another aspect of the present invention, in the method for providing monitoring contents in a system providing monitoring contents for the use of the target computing device, when the application program is executed in the target computing device, the entire contents according to the provisions preset in the application program Capturing a screen or an execution window to generate one or more monitoring images; Generating usage content information using execution information of the application program when the application program is terminated; And generating a monitoring video including the usage description information according to the usage content information and the monitoring image by using the monitoring image and the usage content information generated during a period according to a preset criterion. Provided is a recording medium having recorded thereon a method and a program executing the method.

본 발명에 따르면, 컴퓨팅 장치의 사용 내용을 동영상으로 확인함으로써 관리하는 컴퓨팅 장치가 어떠한 용도로 사용되는지를 한눈에 알아보기 편리하게 된다.According to the present invention, it is easy to see at a glance which purpose the computing device to be managed is used by confirming the use content of the computing device as a video.

또한, 본 발명에 따르면 컴퓨팅 장치의 사용 화면을 캡처한 이미지를 프레임으로 가지며, 사용 내용에 대한 설명이 자막 또는 오디오 형태로 제공되는 동영상을 모니터링된 결과로서 제공함으로써, 더욱 모니터링 내용의 확인에 대한 편리성을 제공할 수 있다.
In addition, according to the present invention has a frame capturing an image capturing the screen of the use of the computing device, by providing a description of the content of use as a subtitle or audio form as a monitored result, more convenient for the confirmation of the monitoring content Can provide sex.

도 1은 본 발명의 일 실시예에 따른 컴퓨팅 장치의 모니터링 내용 제공 시스템을 개략적으로 나타낸 구성도.
도 2는 일반적인 컴퓨팅 장치에서의 웹브라우저 실행화면을 도시한 예시도.
도 3 및 도 4는 본 발명의 각 실시예에 따른 대상 컴퓨팅장치에서 수집되는 모니터링 정보를 도시한 예시도들.
도 5은 본 발명의 일 실시예에 따른 대상 컴퓨팅장치의 모니터링 내용 제공 과정을 도시한 흐름도.
도 6은 본 발명의 일 실시예에 따른 대상 컴퓨팅장치의 모니터링 결과물인 모니터링 동영상의 실행을 도시한 예시도.1 is a block diagram schematically illustrating a system for providing monitoring contents of a computing device according to an embodiment of the present invention.
2 is a diagram illustrating a web browser execution screen in a general computing device.
3 and 4 are exemplary diagrams illustrating monitoring information collected by a target computing device according to each embodiment of the present invention.
5 is a flowchart illustrating a monitoring content providing process of a target computing device according to an exemplary embodiment of the present invention.
6 is an exemplary diagram illustrating execution of a monitoring video that is a monitoring result of a target computing device according to an exemplary embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.As the invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. However, this is not intended to limit the present invention to specific embodiments, it should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.

이하, 첨부한 도면들을 참조하여 본 발명에 따른 실시예들을 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어 도면 부호에 상관없이 동일하거나 대응하는 구성 요소는 동일한 참조번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to embodiments of the present invention, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout the specification and claims. The description will be omitted.

도 1은 본 발명의 일 실시예에 따른 컴퓨팅 장치의 모니터링 내용 제공 시스템을 개략적으로 나타낸 구성도이다.1 is a configuration diagram schematically showing a system for providing monitoring contents of a computing device according to an embodiment of the present invention.

도 1을 참조하면, 본 실시예에 따른 전체 시스템은 대상 컴퓨팅장치(10), 통신망(30) 및 모니터링 서버(50)를 포함한다.Referring to FIG. 1, the entire system according to the present embodiment includes a target computing device 10, a communication network 30, and a monitoring server 50.

대상 컴퓨팅장치(10)는 데스크탑, 랩탑 등의 일반 컴퓨터뿐만 아니라 스마트폰, 개인휴대장치(PDA) 등 컴퓨팅 기능이 탑재된 모든 장치일 수 있으며, 본 실시예에 따라 사용 내용에 대한 모니터링 대상이 되는 컴퓨팅 장치이다.The target computing device 10 may be any device equipped with computing functions such as a smart phone, a personal digital assistant (PDA), as well as a general computer such as a desktop or a laptop, and may be monitored for use according to the present embodiment. Computing device.

본 실시예에 따른 대상 컴퓨팅장치(10)에는 모니터링 프로그램이 설치된다. 모니터링 프로그램은 사용자가 대상 컴퓨팅장치(10)를 이용함에 있어, 웹 브라우저, 아래한글 또는 마이크로소프트 오피스 워드 등의 문서작성프로그램, 멀티미디어 재생기(예를 들어 곰플레이어(GOM Player 등), 메신저프로그램(예를 들어 MSN메신저, 네이트메신저 등) 등의 응용프로그램을 사용함에 따른 사용 내용을 모니터링하기 위한 프로그램이다. 상기한 모니터링 프로그램에 의한 대상 컴퓨팅장치(10)의 사용 내용을 모니터링하는 방법에 대해서는 추후 설명하기로 한다.The monitoring program is installed in the target computing device 10 according to the present embodiment. When the user uses the target computing device 10, the monitoring program includes a web browser, a document writing program such as Hangul or Microsoft Office Word, a multimedia player (for example, GOM Player), a messenger program (for example, For example, a program for monitoring the contents of use by using an application program such as MSN Messenger, Nate Messenger, etc. A method of monitoring the contents of use of the target computing device 10 by the above-described monitoring program will be described later. Shall be.

모니터링 서버(50)는 통신망(30)을 통해 연결된 하나 이상의 대상 컴퓨팅장치(10)로부터 모니터링된 사용 내용에 대한 정보(이하, 모니터링 정보라 칭함)를 수신하여, 해당 모니터링 정보를 정리 및 분석한 결과로서 동영상(이하, 모니터링 동영상이라 칭함)를 생성한다. 생성된 모니터링 동영상은 해당 대상 컴퓨팅장치(10)를 관리하는 관리자(쉬운 예를 들면 자녀의 컴퓨터를 대상 컴퓨팅장치(10)로 설정한 부모)에게 제공될 수 있을 것이다.The monitoring server 50 receives the information on the monitored usage information (hereinafter, referred to as monitoring information) from one or more target computing devices 10 connected through the communication network 30, and organizes and analyzes the corresponding monitoring information. As a video (hereinafter referred to as monitoring video) is generated. The generated monitoring video may be provided to an administrator who manages the target computing device 10 (for example, a parent who sets the child's computer as the target computing device 10).

이해의 편의를 위해 기업에서 본 시스템이 구축된 경우를 가정한 하나의 예를 들면, 각 직원의 대상 컴퓨팅장치(10)에 상기한 모니터링 프로그램이 설치되어 주기적으로 모니터링 정보가 모니터링 서버(50)에 백업됨으로써, 기업 관리자는 각 직원들이 대상 컴퓨팅장치(10)를 주로 어떠한 용도로 이용하는지를 확인할 수 있게 되는 것이다.For example, assuming that the present system is constructed for the convenience of understanding, the monitoring program described above is installed in the target computing device 10 of each employee so that the monitoring information is periodically sent to the monitoring server 50. By being backed up, the corporate administrator can determine what each employee is using the target computing device 10 for.

또한, 모니터링 서버(50)는 상기한 모니터링 프로그램을 통신망(30)을 통해 대상 컴퓨팅장치(10)에 제공할 수 있을 것이다. 물론, CD, USB메모리장치 등의 저장매체를 이용하여 대상 컴퓨팅장치(10)에 모니터링 프로그램이 설치될 수도 있으나, 상기한 바와 같이 모니터링 서버(50)로부터 다운로드(download) 받아 설치될 수도 있음은 자명할 것이다.In addition, the monitoring server 50 may provide the monitoring program to the target computing device 10 through the communication network 30. Of course, the monitoring program may be installed in the target computing device 10 using a storage medium such as a CD or a USB memory device, but it may be installed by downloading from the monitoring server 50 as described above. something to do.

도면에 도시된 통신망(30)은 LAN(Local Area Network)과 같은 일반 개인 사설망일 수 있으며, 또는 인터넷망과 같은 공유망일 수도 있다.The communication network 30 shown in the figure may be a general private private network such as a local area network (LAN) or a shared network such as an internet network.

이하, 대상 컴퓨팅장치(10)(즉, 설치된 모니터링 프로그램)가 사용자의 사용에 따른 모니터링을 수행하여 그에 따른 모니터링 정보를 생성하는 방식에 대해 설명하기로 한다.Hereinafter, a description will be given of a method in which the target computing device 10 (that is, an installed monitoring program) performs monitoring according to a user's use to generate monitoring information.

도 2는 일반적인 컴퓨팅 장치에서의 웹브라우저 실행화면을 도시한 예시도이고, 도 3 및 도 4는 본 발명의 각 실시예에 따른 대상 컴퓨팅장치(10)에서 수집되는 모니터링 정보를 도시한 예시도들이다.2 is an exemplary diagram illustrating a web browser execution screen in a general computing device, and FIGS. 3 and 4 are exemplary diagrams showing monitoring information collected by the target computing device 10 according to each embodiment of the present invention. .

대상 컴퓨팅장치(10)에 설치되는 상기한 모니터링 프로그램은 대상 컴퓨팅장치(10)가 부팅(booting)되어 시스템이 온(on) 되어 있는 상태 또는 특정 응용프로그램이 실행될 때 출력되는 전체화면 또는 화면 일부(예를 들어, 실행된 응용프로그램에 따른 실행창)를 미리 설정된 규정에 따라 캡처(capture)하여 모니터링 이미지를 생성한다.The monitoring program installed in the target computing device 10 may include a full screen or a portion of a screen that is output when the target computing device 10 is booted and the system is turned on or when a specific application is executed. For example, an execution window according to an executed application program is captured according to a preset rule to generate a monitoring image.

예를 들어, 도 2와 함께 도 3을 참조하면, 도 2에 도시된 바와 같이 대상 컴퓨팅장치(10)에서 인터넷익스플로러(internet explorer)와 같은 웹 브라우저(web browser) 응용프로그램이 실행된 경우, 도 3에 도시된 바와 같은 전체화면(200)이 캡처되어 모니터링 이미지(310)가 생성될 수 있다.For example, referring to FIG. 3 along with FIG. 2, when a web browser application such as an internet explorer is executed in the target computing device 10 as shown in FIG. 2, FIG. The full screen 200 as shown in FIG. 3 may be captured to generate a monitoring image 310.

응용프로그램 중 웹브라우저의 경우, 대상 컴퓨팅장치(10)는 접속된 웹페이지(webpage)마다 모니터링 이미지를 생성할 수 있는데, 쉬운 예를 들자면 도 2에 도시된 바와 같이 [네이버]라는 웹사이트에 접속되면 해당 웹사이트의 메인 페이지가 캡처되고, [소프트웨어]라는 검색어를 입력하여 검색된 웹페이지가 또한 캡처되어 두 개의 모니터링 이미지가 생성될 수 있다. 물론 이는 하나의 실시예일뿐이며, 일정 시간 주기(예를 들어, 30초)마다 모니터링 이미지가 생성될 수도 있다.In the case of a web browser among applications, the target computing device 10 may generate a monitoring image for each connected webpage. For example, as illustrated in FIG. 2, the target computing device 10 may access a website called [Naver]. When the main page of the website is captured, the searched web page may also be captured by entering the search word [software] to generate two monitoring images. Of course, this is only one embodiment, and a monitoring image may be generated every certain period of time (eg, 30 seconds).

이와 달리, 동영상 재생프로그램, 문서작성 프로그램 등 각 응용프로그램마다 각각의 화면 캡처 기준이 설정될 수 있는데, 예를 하나 들자면 동영상 재생프로그램은 30초마다 모니터링 이미지가 생성되고 문서작성 프로그램은 5분마다 모니터링 이미지가 생성될 수 있다. In contrast, each screen capture criterion can be set for each application such as a video player or a document creator. For example, a video player generates a monitoring image every 30 seconds and a document creator monitors every five minutes. An image can be generated.

그리고, 본 실시예에서는 전체화면(200)이 캡처되는 경우를 예로 들었으나, 이에 한정되는 것은 아니며 해당 응용프로그램에 따른 실행창(210, 예를 들어 웹브라우저 실행창)만이 캡처된 모니터링 이미지가 생성될 수도 있다.In the present embodiment, the entire screen 200 is captured as an example, but the present invention is not limited thereto, and a monitoring image in which only an execution window 210 (for example, a web browser execution window) according to the corresponding application is captured is generated. May be

또한, 도 3을 참조하면 대상 컴퓨팅장치(10)는 모니터링 정보(300)로서 단순히 모니터링 이미지만(310)을 생성하는 것이 아니라, 해당 응용프로그램의 실행이 종료되면 그 사용내용정보(320)를 생성한다. In addition, referring to FIG. 3, the target computing device 10 does not merely generate the monitoring image 310 as the monitoring information 300, but generates the usage information information 320 when execution of the corresponding application is terminated. do.

일 실시예에 따르면, 대상 컴퓨팅장치(10)는 상기한 사용내용정보(320)를 응용프로그램의 실행에 따른 실행창의 타이틀(title, 도 2의 212)로부터 응용프로그램 명칭, 검색어 등을 취득할 수 있으며, 주소입력창(214)로부터 접속정보(예를 들어 URL)를 취득할 수 있다. 또한 응용프로그램의 실행에 따른 로그(log)정보로부터 실행시작시간, 실행시간 등이 취득될 수 있을 것이다.According to an embodiment of the present disclosure, the target computing device 10 may acquire the application name, a search word, and the like from the use content information 320 from the title of the execution window (212 of FIG. 2) according to the execution of the application. The access information (for example, URL) can be obtained from the address input window 214. In addition, execution start time, execution time, etc. may be obtained from log information according to the execution of the application.

다시 말해, 대상 컴퓨팅장치(10)는 실행되는 응용프로그램의 실행화면을 캡처하여 모니터링 이미지(310)를 생성하고, 해당 응용프로그램의 사용내용정보(320)를 함께 생성하여 이를 모니터링 정보로서 모니터링 서버(50)로 전송한다.In other words, the target computing device 10 generates a monitoring image 310 by capturing an execution screen of an application to be executed, and generates the usage information information 320 of the corresponding application and monitors it as monitoring information ( 50).

일 실시예에 따르면, 대상 컴퓨팅장치(10)는 일정 시간 주기(예를 들어, 하루 또는 일주일)로 상기한 모니터링 정보(300)를 모니터링 서버(50)로 전송할 수도 있으며, 다른 실시예에 따르면 사용자에 의해 실제 사용된 일정 시간(예를 들어, 24시간 등) 마다 모니터링 정보(300)를 모니터링 서버(50)로 전송할 수도 있다. 또 다른 실시예에 따르면, 모니터링 이미지(310)가 일정 개수(예를 들어, 100개) 이상 생성되면, 해당 모니터링 정보(300)가 대상 컴퓨팅장치(10)로부터 모니터링 서버(50)로 제공될 수도 있을 것이다.According to an embodiment, the target computing device 10 may transmit the above-described monitoring information 300 to the monitoring server 50 at a predetermined time period (for example, one day or one week), and according to another embodiment, the user The monitoring information 300 may be transmitted to the monitoring server 50 every predetermined time (eg, 24 hours, etc.) actually used. According to another embodiment, when a certain number (eg, 100) or more of the monitoring images 310 are generated, the corresponding monitoring information 300 may be provided from the target computing device 10 to the monitoring server 50. There will be.

위에서는 대상 컴퓨팅장치(10)에서 실행되는 응용프로그램으로서 웹브라우저를 예로 들었으나, 동영상 등의 멀티미디어를 재생하는 응용프로그램인 동영상 플레이어(예를 들어 곰플레이어(GOM player))의 실행에 따른 모니터링 정보(400)를 예시한 도 4를 참조하면, 실행파일명, 해당 파일의 저장위치 등에 대한 정보가 사용내용정보(420)로서 더 포함된다.In the above, although the web browser is taken as an example of an application program running on the target computing device 10, monitoring information according to execution of a video player (for example, a GOM player), which is an application that plays multimedia such as a video, etc. Referring to FIG. 4 exemplarily illustrating 400, information about an execution file name, a storage location of the file, and the like is further included as the usage content information 420.

또한, 동영상 플레이어와 같이 화면이 자주 바뀌는 응용프로그램의 경우에는 웹브라우저에 비해 보다 빠른 시간 주기로 화면이 캡처되어 많은 수의 모니터링 이미지(410-1, 410-2,...)가 생성될 수 있을 것이다. 또한, 동영상 플레이어 등의 특정 응용프로그램은 전체화면이 아닌 해당 실행창만이 캡처된 모니터링 이미지가 생성될 수도 있다. 다시 말해, 대상 컴퓨팅장치(10)는 실행되는 응용프로그램의 종류에 따라 화면의 캡처 방식 또는 캡처 주기를 달리할 수 있다.In addition, applications that change screens frequently, such as a video player, may capture screens at a faster time interval than web browsers, and may generate a large number of monitoring images (410-1, 410-2, ...). will be. In addition, a specific application such as a video player may generate a monitoring image in which only a corresponding execution window is captured, not a full screen. In other words, the target computing device 10 may change the screen capture method or the capture cycle according to the type of the application program to be executed.

이하, 도 1에 따른 시스템에서의 모니터링 내용 제공 과정에 대해 설명하기로 한다.Hereinafter, the monitoring content providing process in the system according to FIG. 1 will be described.

도 5은 본 발명의 일 실시예에 따른 대상 컴퓨팅장치(10)의 모니터링 내용 제공 과정을 도시한 흐름도이다.5 is a flowchart illustrating a monitoring content providing process of the target computing device 10 according to an exemplary embodiment.

도 5를 참조하면, 대상 컴퓨팅장치(10)는 시스템이 실행되면(S510), 상술한 바와 같은 규정(즉, 응용프로그램의 실행여부, 응용프로그램의 종류 등)에 따라 모니터링 정보를 생성하고(S520), 생성된 모니터링 정보를 모니터링 서버(50)로 전송한다(S530). 일 실시예에 따르면, 대상 컴퓨팅장치(10)는 사용을 마친 사용자로부터 시스템 오프(off)명령이 입력되면 그 동안 생성된 모니터링 정보를 모니터링 서버(50)로 전송한 후 시스템을 오프시킬 수 있다. 또는 전술한 바와 같이 일정 시간 주기로 또는 일정 사용 시간마다 또는 일정 크기(size)의 모니터링 정보가 생성된 경우 등의 규정에 따라 모니터링 정보가 모니터링 서버(50)로 전송될 수 있다. 그리고, 대상 컴퓨팅장치(10)에서의 모니터링 정보 생성 방법에 대해서는 위에서 상세히 설명하였으므로 중복되는 설명은 생략한다.Referring to FIG. 5, when the system is executed (S510), the target computing device 10 generates monitoring information according to the above-described rules (ie, whether the application is executed, the type of the application, etc.) (S520). In step S530, the generated monitoring information is transmitted to the monitoring server 50. According to an embodiment of the present disclosure, when a system off command is input from a user who has completed use, the target computing device 10 may transmit the monitoring information generated therein to the monitoring server 50 and then turn off the system. Alternatively, as described above, the monitoring information may be transmitted to the monitoring server 50 according to a regulation such as at a predetermined time period, at a predetermined use time, or when a monitoring information having a predetermined size is generated. In addition, since the monitoring information generating method in the target computing device 10 has been described in detail above, redundant description thereof will be omitted.

모니터링 서버(50)는 수신된 대상 컴퓨팅장치(10)의 모니터링 정보 중 모니터링 이미지들을 병합하여 동영상을 생성하며(S540), 해당 동영상에 모니터링 정보에 포함된 사용내용정보를 가공한 사용 설명 내용을 적용하여 모니터링 결과인 모니터링 동영상을 생성하고(S550), 이를 저장한다(S560). The monitoring server 50 generates a video by merging the monitoring images among the monitoring information of the received target computing device 10 (S540), and applies the usage description processing the usage content information included in the monitoring information to the corresponding video. By generating a monitoring video as a monitoring result (S550), and stores it (S560).

이하, 모니터링 서버(50)에서의 대상 컴퓨팅장치(10)로부터 수집된 모니터링 정보를 이용한 모니터링 동영상의 생성 방법에 대해 상세히 설명하기로 한다.Hereinafter, a method of generating a monitoring video using the monitoring information collected from the target computing device 10 in the monitoring server 50 will be described in detail.

우선, 모니터링 이미지를 이용한 모니터링 동영상의 생성은, 모니터링 이미지가 모니터링 동영상의 각 프레임(frame)으로 이용되는 개념이다. 즉, 모니터링 서버(50)는 모니터링 이미지를 동영상의 각 프레임(frame)으로 이용하고, 또한 해당 프레임들의 노출시간을 그에 따른 응용프로그램마다 달리 설정할 수 있다. 일반적으로 영화(movie)와 같은 동영상은 재생시간 1초에 16개 이상의 프레임이 이용되는데, 이와 달리 본 실시예에 따른 모니터링 동영상은 하나의 프레임이 특정 재생 시간 동안 노출되는 방식이다. 이해의 편의를 위해 예를 들자면, 웹브라우저의 실행에 의한 모니터링 이미지에 따른 프레임은 재생시간 3초의 노출 시간이 설정되고, 동영상 플레이어에 의한 모니터링 이미지에 따른 프레임은 2초의 노출시간이 설정될 수 있다.First, the generation of the monitoring video using the monitoring image is a concept in which the monitoring image is used for each frame of the monitoring video. That is, the monitoring server 50 may use the monitoring image as each frame of the video, and may set the exposure time of the corresponding frames differently for each application. In general, a video such as a movie uses 16 or more frames in one second of play time. In contrast, in the monitoring video according to the present embodiment, one frame is exposed during a specific play time. For convenience, for example, an exposure time of a playback time of 3 seconds may be set for a frame according to a monitoring image by execution of a web browser, and an exposure time of 2 seconds may be set for a frame according to a monitoring image by a video player. .

다른 실시예에 따르면, 모니터링 동영상을 생성하는 시점에 모인 모니터링 이미지의 개수에 따라 각 모니터링 이미지의 노출 시간이 설정될 수도 있다. 이는 모니터링 동영상의 총 재생 시간을 최대한 일정하게 생성하도록 하기 위함이다. 쉬운 예를 들자면, 모니터링 이미지의 개수와 상관없이 재생시간이 k(임의의 양의 실수)시간을 갖는 모니터링 동영상이 생성되도록 미리 설정된 경우, 모니터링 이미지의 개수가 많아질수록 각각의 노출 시간은 짧아질 것이다.According to another embodiment, the exposure time of each monitoring image may be set according to the number of monitoring images collected at the time of generating the monitoring video. This is to make the total playing time of the monitoring video as constant as possible. For example, if the monitoring video is preset to generate a k (random amount of real time) time regardless of the number of monitoring images, each exposure time will be shorter as the number of monitoring images increases. will be.

또한, 모니터링 서버(50)는 각 모니터링 이미지의 생성시간(또는 도 3 또는 도 4에 따른 실행시작시간) 순으로 정렬하여 프레임화시킬 수 있을 것이다.In addition, the monitoring server 50 may be framed in the order of creation time (or execution start time according to FIG. 3 or 4) of each monitoring image.

따라서, 모니터링 서버(50)는 생성된 시간순으로 정렬된 각 모니터링 이미지에 따른 프레임의 노출시간을 설정하고, 각 프레임을 병합하여 모니터링 동영상을 생성하는 것이다.Therefore, the monitoring server 50 sets the exposure time of the frame according to each monitoring image arranged in the generated time order, and merges each frame to generate a monitoring video.

또한, 일 실시예에 따르면 모니터링 서버(50)는 대상 컴퓨팅장치(10)로부터 함께 수신된 사용내용정보(도 3의 320 또는 도 4의 420 참조)를 이용한 사용설명정보를 해당 프레임에 자막 형태 또는 음성(audio) 형태로 삽입한다. In addition, according to an embodiment, the monitoring server 50 may use the caption form or the caption information in the corresponding frame using the usage information (see 320 in FIG. 3 or 420 in FIG. 4) received together from the target computing device 10. Insert in audio form.

사용내용정보를 이용한 사용설명정보의 생성 방법은 다양하게 설정될 수 있는데, 예를 들어, 사용자가 대상 컴퓨팅장치(10)의 웹 브라우저를 실행하여 다수개의 웹페이지를 열어보았다면, 모든 웹페이지들에 대한 사용내용정보를 취합하여 웹브라우저의 총 실행시간, 방문 웹페이지 총 개수, 입력된 검색어들 등에 대한 사용설명정보가 생성될 수 있을 것이다. 해당 사용설명정보는 그에 따른 모니터링 이미지에 대응된 프레임의 자막형태로 삽입될 수 있으며, 또는 음성 합성기술(TTS : text-to-speech)에 의해 텍스트 형태의 사용설명정보가 오디오 형태로 생성되어 동영상에 삽입될 수 있다.The method of generating the user description information using the usage content information can be variously set. For example, if a user opens a plurality of web pages by executing a web browser of the target computing device 10, all the web pages are displayed. By using the usage information about the usage description information for the total execution time of the web browser, the total number of visited web pages, input search terms, etc. may be generated. The instruction manual may be inserted in the form of a subtitle of a frame corresponding to the monitoring image, or the instruction manual information in text form is generated by audio synthesis technology (TTS: text-to-speech) to generate an audio image. Can be inserted in

본 실시예에서는 모니터링 이미지 자체가 프레임으로 형성되는 것을 예로 들었으나, 반드시에 이에 한정되는 것은 아니며, 해당 모니터링 이미지 및/또는 사용내용정보를 가공한 새로운 이미지가 프레임으로 이용될 수도 있다. 쉬운 예를 하나 들자면, 모니터링 이미지 자체가 일측에 위치하고, 다른 부분에는 사용내용정보가 텍스트 형태로 기입된 형태의 이미지가 새로이 생성되어 모니터링 동영상의 프레임으로서 이용될 수도 있다.In the present exemplary embodiment, the monitoring image itself is formed as a frame. However, the present disclosure is not limited thereto, and a new image obtained by processing the corresponding monitoring image and / or usage information may be used as the frame. As an easy example, the monitoring image itself is located on one side, and in another part, an image in which the usage content information is written in text form may be newly generated and used as a frame of the monitoring video.

본 실시예에 따르면, 관리자는 영상을 통해 대상 컴퓨팅장치(10)가 어떤 화면들을 출력하였는지를 일부적으로나마 확인할 수 있으며, 자막 또는 음성 형태의 설명을 통해 그 사용현황을 보다 자세히 알 수 있게 된다.According to the present exemplary embodiment, the administrator may partially check which screens are output by the target computing device 10 through the image, and the usage status may be known in more detail through the description in the form of subtitles or audio.

또한, 일실시예에 따르면, 모니터링 서버(50)는 모니터링 동영상의 각 프레임에 특정 웹페이지에 접속할 수 있는 접속정보(예를 들어, URL)를 링크(link)시킬 수 있다. 따라서, 관리자가 자신의 단말장치를 이용하여 모니터링 동영상을 확인하던 중 보여지는 화면을 터치하는 등의 입력을 수행하면, 해당 프레임에 링크된 웹페이지로 바로 연결될 수 있다. 예를 들어, 모니터링 동영상의 재생 중 현재 출력되는 화면이 웹페이지 A가 캡처된 모니터링 이미지에 따른 프레임인 경우, 그 프레임에는 웹페이지 A의 접속정보(URL)가 링크될 수 있는 것이다.In addition, according to an embodiment, the monitoring server 50 may link access information (for example, a URL) for accessing a specific web page to each frame of the monitoring video. Therefore, when an administrator performs an input such as touching a screen displayed while checking a monitoring video using his terminal device, the administrator may be directly connected to a web page linked to the corresponding frame. For example, when the currently output screen during playback of the monitoring video is a frame according to the monitoring image from which the webpage A is captured, the access information (URL) of the webpage A may be linked to the frame.

상기한 웹페이지뿐 아니라, 대상 컴퓨팅장치(10)가 동영상 파일, 문서 파일 등을 관련 응용프로그램을 이용하여 사용한 경우, 그에 따른 모니터링 이미지에는 상기한 파일들을 로딩(loading)할 수 있는 접속정보(저장위치)가 링크될 수 있을 것이다. 예를 들어, 대상 컴퓨팅장치(10)가 이용하는 데이터들이 클라우드와 같은 특정 서버에 위치한 경우, 모니터링 동영상을 재생하던 관리자의 단말장치에서도 해당 모니터링 이미지에 따른 프레임에 링크된 파일을 상기한 특정 서버로 접속하여 취득될 수 있다. 물론 클라우드와 같은 특정 서버를 반드시 이용할 필요는 없으며, 해당 파일이 대상 컴퓨팅장치(10)에 저장되어 있더라도, 관리자의 단말장치가 대상 컴퓨팅장치(10)에 접속할 수 있다면, 모니터링 동영상에 링크된 접속정보(예를 들어 대상 컴퓨팅장치(10)의 아이피주소(IP Address) 및 저장위치)를 이용하여 그 파일은 취득될 수 있을 것이다.
In addition to the web page, when the target computing device 10 uses a video file, a document file, or the like using a related application program, access information (storage) for loading the above files may be stored in the monitoring image. Location) may be linked. For example, when the data used by the target computing device 10 is located in a specific server such as a cloud, the terminal device of the administrator who plays the monitoring video may access a file linked to a frame according to the monitoring image to the specific server. Can be obtained. Of course, it is not necessary to use a specific server such as a cloud, and even if the corresponding file is stored in the target computing device 10, if the terminal device of the administrator can access the target computing device 10, the access information linked to the monitoring video. The file may be obtained using (eg, IP address and storage location of the target computing device 10).

도 6은 본 발명의 일 실시예에 따른 대상 컴퓨팅장치(10)의 모니터링 결과물인 모니터링 동영상의 실행을 도시한 예시도이다.6 is an exemplary diagram illustrating execution of a monitoring video that is a monitoring result of the target computing device 10 according to an exemplary embodiment.

도 6을 참조하면, 모니터링 서버(50)에 저장된 모니터링 동영상은 대상 컴퓨팅장치(10)에 대한 관리 권한을 갖는 관리자에 의해 열람이 가능하며, 예를 들어 관리자가 스마트폰(smart phone)과 같은 단말장치(600)를 이용하여 모니터링 서버(50)로부터 모니터링 동영상을 수신하여 시청할 수 있다.Referring to FIG. 6, the monitoring video stored in the monitoring server 50 may be viewed by an administrator having a management authority for the target computing device 10, for example, the terminal may be a terminal such as a smart phone. The monitoring apparatus 50 may receive and watch a monitoring video from the monitoring server 50.

따라서, 관리자는 대상 컴퓨팅장치(10)에서 실행되었던 응용프로그램들에 의한 화면뿐 아니라, 해당 응용프로그램들이 언제, 얼마나, 어떻게 사용되었는지 등에 대한 상세 정보도 자막 또는 음성 형태로 확인할 수 있게 된다.
Therefore, the administrator can check not only the screens of the applications executed in the target computing device 10 but also detailed information on when, how, and how the corresponding applications are used in caption or voice form.

상술한 본 발명에 따른 컴퓨팅 장치의 모니터링 내용 제공 방법은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로서 구현되는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터 시스템에 의하여 해독될 수 있는 데이터가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 통신망으로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 읽을 수 있는 코드로서 저장되고 실행될 수 있다. The above-described method for providing monitoring contents of a computing device according to the present invention may be embodied as computer readable codes on a computer readable recording medium. Computer-readable recording media include all kinds of recording media having data stored thereon that can be decrypted by a computer system. For example, there may be a read only memory (ROM), a random access memory (RAM), a magnetic tape, a magnetic disk, a flash memory, an optical data storage device, and the like. In addition, the computer-readable recording medium may be distributed and executed in a computer system connected to a computer network, and may be stored and executed as a code readable in a distributed manner.

또한, 상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention as defined in the appended claims. It will be understood that various modifications and changes may be made.

10 : 대상 컴퓨팅장치 30 : 통신망
50 : 모니터링 서버10: target computing device 30: communication network
50: monitoring server

Claims (14)

응용 프로그램이 실행되면, 상기 응용프로그램에 미리 설정된 규정에 따라 실행화면을 캡처(capture)하여 하나 이상의 모니터링 이미지를 생성하고, 상기 응용 프로그램이 종료되면 상기 응용 프로그램의 실행정보를 이용한 사용내용정보를 생성하는 대상 컴퓨팅장치; 및
상기 대상 컴퓨팅장치로부터 일정 기간 동안 수신되는 하나 이상의 응용 프로그램에 따른 모니터링 이미지들과 사용내용정보들을 이용하여, 각 응용 프로그램에 따른 사용내용정보를 이용한 각각의 사용설명정보를 생성하고, 상기 모니터링 이미지들이 시간순으로 나열되는 모니터링 동영상을 생성하되 상기 각각의 사용설명정보가 대응되는 모니터링 이미지들이 노출되는 시간 동안 자막 또는 오디오 형태로 출력되도록 하는 모니터링 서버를 포함하는 모니터링 내용 제공 시스템.
When the application program is executed, one or more monitoring images are generated by capturing an execution screen according to a predetermined rule in the application program, and when the application program is terminated, usage information information using execution information of the application program is generated. A target computing device; And
By using the monitoring image and the usage content information according to one or more application programs received from the target computing device for a period of time, each of the usage description information using the usage information information for each application program, and the monitoring images And a monitoring server generating a monitoring video arranged in chronological order and outputting the caption or audio format during the time when the monitoring images corresponding to the respective user's instruction information are exposed.
제 1항에 있어서,
상기 대상 컴퓨팅장치는 실행되는 응용프로그램의 종류에 따라 전체화면 또는 실행창 중 어느 하나를 캡처하여 상기 모니터링 이미지를 생성하는 것을 특징으로 하는 모니터링 내용 제공 시스템.
The method of claim 1,
And the target computing device generates the monitoring image by capturing any one of a full screen and an execution window according to a type of an application program to be executed.
제 1항에 있어서,
상기 대상 컴퓨팅장치는 상기 응용프로그램의 명칭, 실행 시작 시간, 총 실행 시간, 실행파일명, 파일 저장 위치, 접속 사이트명, 검색어 중 어느 하나 이상이 포함되도록 상기 사용내용정보를 생성하는 것을 특징으로 하는 모니터링 내용 제공 시스템.
The method of claim 1,
The target computing device generates the usage information so that any one or more of a name, execution start time, total execution time, execution file name, file storage location, access site name, and search word of the application is included. Content Delivery System.
삭제delete 제 1항에 있어서,
상기 대상 컴퓨팅장치는 상기 응용프로그램이 웹브라우저인 경우 접속되는 웹페이지 마다 상기 모니터링 이미지를 생성하는 것을 특징으로 하는 모니터링 내용 제공 시스템.
The method of claim 1,
And the target computing device generates the monitoring image for each web page accessed when the application program is a web browser.
제 5항에 있어서,
상기 모니터링 서버는 상기 모니터링 동영상 생성 시 상기 웹페이지에 따른 모니터링 이미지에 상응하는 프레임에 상기 웹페이지로의 접속정보를 링크(link)시키는 것을 특징으로 하는 모니터링 내용 제공 시스템.
6. The method of claim 5,
And the monitoring server links the access information to the web page in a frame corresponding to the monitoring image according to the web page when the monitoring video is generated.
제 1항에 있어서,
상기 모니터링 서버는 상기 모니터링 동영상을 생성할 때, 파일을 실행하는 응용프로그램에 따른 모니터링 이미지에 상응하는 프레임에는 상기 파일로의 접속정보를 링크(link)시키는 것을 특징으로 하는 모니터링 내용 제공 시스템.
The method of claim 1,
And the monitoring server links the access information to the file in a frame corresponding to a monitoring image according to an application program executing a file when generating the monitoring video.
제 1항에 있어서,
상기 모니터링 서버는 상기 모니터링 동영상을 생성할 때, 상기 사용내용정보를 참조하여 상기 모니터링 이미지에 따른 프레임의 노출 시간을 설정하는 것을 특징으로 하는 모니터링 내용 제공 시스템.
The method of claim 1,
And the monitoring server sets an exposure time of a frame according to the monitoring image with reference to the usage content information when generating the monitoring video.
제 1항에 있어서,
상기 모니터링 서버는 미리 설정된 재생 시간에 상응하도록 각 모니터링 이미지에 따른 프레임의 노출 시간을 설정하여 상기 모니터링 동영상을 생성하는 것을 특징으로 하는 모니터링 내용 제공 시스템.
The method of claim 1,
And the monitoring server generates the monitoring video by setting an exposure time of a frame according to each monitoring image to correspond to a preset playback time.
대상 컴퓨팅장치의 사용에 대한 모니터링 내용을 제공하는 시스템에서의 모니터링 내용 제공 방법에 있어서,
대상 컴퓨팅장치에서 응용프로그램이 실행되면, 상기 응용프로그램에 미리 설정된 규정에 따라 전체화면 또는 실행창을 캡처하여 하나 이상의 모니터링 이미지를 생성하는 단계;
상기 응용 프로그램이 종료되면 상기 응용 프로그램의 실행정보를 이용한 사용내용정보를 생성하는 단계; 및
미리 설정된 기준에 따른 기간 동안에 생성된 하나 이상의 응용프로그램에 따른 각 사용내용정보들을 이용한 각각의 사용설명정보를 생성하고,
상기 하나 이상의 응용프로그램 각각에 따른 모니터링 이미지들이 시간순으로 나열되며, 상기 각각의 사용설명정보는 대응되는 모니터링 이미지들이 노출되는 시간 동안 자막 또는 오디오 형태로 출력되는 모니터링 동영상을 생성하는 단계를 포함하는 모니터링 내용 제공 방법.
In the method for providing the monitoring content in the system for providing a monitoring content for the use of the target computing device,
When the application program is executed in the target computing device, generating at least one monitoring image by capturing a full screen or an execution window according to a preset rule of the application program;
Generating usage content information using execution information of the application program when the application program is terminated; And
Generating respective usage description information using respective usage information according to one or more application programs generated during a period according to a preset criterion,
Monitoring images according to each of the one or more applications are listed in chronological order, wherein each of the instructions for use monitoring information comprising the step of generating a monitoring video output in the form of subtitles or audio during the time that the corresponding monitoring image is exposed; How to Provide.
삭제delete 제 10항에 있어서,
상기 모니터링 이미지는 상기 응용프로그램의 종류에 따라 전체화면 또는 실행창 중 어느 하나가 캡처되어 생성되는 것을 특징으로 하는 모니터링 내용 제공 방법.
The method of claim 10,
The monitoring image provides a monitoring content, characterized in that any one of the full screen or the execution window is captured and generated according to the type of the application program.
제 10항에 있어서,
상기 모니터링 동영상을 생성할 때, 파일을 실행하는 응용프로그램에 따른 모니터링 이미지에 상응하는 프레임에는 상기 파일로의 접속정보를 링크(link)시키고, 웹페이지에 따른 모니터링 이미지에 상응하는 프레임에는 상기 웹페이지로의 접속정보를 링크시키는 것을 특징으로 하는 모니터링 내용 제공 방법.
The method of claim 10,
When generating the monitoring video, the access information to the file is linked to the frame corresponding to the monitoring image according to the application program executing the file, and the web page to the frame corresponding to the monitoring image according to the web page. Monitoring content providing method characterized in that the connection information to the link.
디지털 정보 처리 장치에 의해 판독 가능하며, 제 10항, 제 12항 내지 제 13항 중 어느 한 항의 방법을 수행하기 위한 프로그램이 기록된 기록 매체.
A recording medium readable by a digital information processing apparatus, in which a program for performing the method of any one of claims 10 and 12 to 13 is recorded.
KR1020110108730A 2011-10-24 2011-10-24 System for providing substance about monitoring of computing device and method thereof KR101111956B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110108730A KR101111956B1 (en) 2011-10-24 2011-10-24 System for providing substance about monitoring of computing device and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110108730A KR101111956B1 (en) 2011-10-24 2011-10-24 System for providing substance about monitoring of computing device and method thereof

Publications (1)

Publication Number Publication Date
KR101111956B1 true KR101111956B1 (en) 2012-02-15

Family

ID=45840152

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110108730A KR101111956B1 (en) 2011-10-24 2011-10-24 System for providing substance about monitoring of computing device and method thereof

Country Status (1)

Country Link
KR (1) KR101111956B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015108283A1 (en) * 2014-01-14 2015-07-23 에스케이플래닛 주식회사 Application error detection method for cloud streaming service, and apparatus and system therefor
KR101543295B1 (en) * 2014-01-14 2015-08-10 에스케이플래닛 주식회사 Application error detection method for cloud streaming service, apparatus and system therefor
KR20160008400A (en) * 2014-07-14 2016-01-22 엔트릭스 주식회사 Method for testing cloud streaming server, apparatus and system therefor

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050048215A (en) * 2003-11-19 2005-05-24 주식회사 아데나코리아 Method for real-time storing and playing of working screen and audio signal, and system there-of

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050048215A (en) * 2003-11-19 2005-05-24 주식회사 아데나코리아 Method for real-time storing and playing of working screen and audio signal, and system there-of

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015108283A1 (en) * 2014-01-14 2015-07-23 에스케이플래닛 주식회사 Application error detection method for cloud streaming service, and apparatus and system therefor
KR101543295B1 (en) * 2014-01-14 2015-08-10 에스케이플래닛 주식회사 Application error detection method for cloud streaming service, apparatus and system therefor
US10282246B2 (en) 2014-01-14 2019-05-07 Sk Techx Co., Ltd. Application error detection method for cloud streaming service, and apparatus and system therefor
KR20160008400A (en) * 2014-07-14 2016-01-22 엔트릭스 주식회사 Method for testing cloud streaming server, apparatus and system therefor
KR102199296B1 (en) 2014-07-14 2021-01-06 에스케이플래닛 주식회사 Method for testing cloud streaming server, apparatus and system therefor

Similar Documents

Publication Publication Date Title
EP3457295B1 (en) Method for recording, editing and reproduction of computer session
US20190146616A1 (en) Systems And Methods For Remote Tracking And Replay Of User Interaction With A Webpage
US9954746B2 (en) Automatically generating service documentation based on actual usage
US10083159B1 (en) Method for recording, editing and reproduction of web browser session
US20190228047A1 (en) Obfuscating network page structure
JP6318266B2 (en) System for managing extension changes to web pages
US8533238B2 (en) Sharing information about a document across a private computer network
US20190026065A1 (en) Systems and methods for enabling replay of internet co-browsing
US8041781B2 (en) System and method for providing web system services for storing data and context of client applications on the web
US8046436B2 (en) System and method of providing context information for client application data stored on the web
US20150372885A1 (en) Method, apparatus, and system for tracing resource propagation
US8046438B2 (en) System and method of restoring data and context of client applications stored on the web
KR20110107363A (en) Method for server-side logging of client browser state through markup language
Guo et al. Sara: self-replay augmented record and replay for android in industrial cases
US20130246943A1 (en) Central Logout from Multiple Websites
US20140075301A1 (en) Information processing apparatus, control method, and recording medium
US20180150639A1 (en) Security vulnerability detection
US7996779B2 (en) System and method of providing a user interface for client applications to store data and context information on the web
US20120198324A1 (en) Systems, Methods, and Apparatuses to Write on Web Pages
Chang et al. Forensic Analysis of Social Networks Based on Instagram.
CN114692049A (en) Browser-based screen recording method and device, electronic equipment and storage medium
TWI427490B (en) Methods and systems for viewing web pages, and computer program products thereof
KR101111956B1 (en) System for providing substance about monitoring of computing device and method thereof
US8046437B2 (en) System and method of storing data and context of client application on the web
Horsman et al. A forensic exploration of the Microsoft Windows 10 timeline

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141125

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160407

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee