KR102460638B1 - Method for providing guide information on error event and server using the same - Google Patents

Method for providing guide information on error event and server using the same Download PDF

Info

Publication number
KR102460638B1
KR102460638B1 KR1020220102977A KR20220102977A KR102460638B1 KR 102460638 B1 KR102460638 B1 KR 102460638B1 KR 1020220102977 A KR1020220102977 A KR 1020220102977A KR 20220102977 A KR20220102977 A KR 20220102977A KR 102460638 B1 KR102460638 B1 KR 102460638B1
Authority
KR
South Korea
Prior art keywords
data
packet
model
error event
category
Prior art date
Application number
KR1020220102977A
Other languages
Korean (ko)
Inventor
박영수
안준영
Original Assignee
(주)시큐레이어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)시큐레이어 filed Critical (주)시큐레이어
Priority to KR1020220102977A priority Critical patent/KR102460638B1/en
Application granted granted Critical
Publication of KR102460638B1 publication Critical patent/KR102460638B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0793—Remedial or corrective actions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0709—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in a distributed system consisting of a plurality of standalone computer nodes, e.g. clusters, client-server systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2252—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using fault dictionaries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2294—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing by remote test
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/453—Help systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/542—Event management; Broadcasting; Multicasting; Notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/835—Timestamp

Abstract

According to one aspect of the present invention, disclosed is a method for providing guide information about an error event. The method comprises the steps of: (a) regarding the error event that occurred in a certain service, when a first packet including error event data including log data for the error event, environment data in which the service is executed, and setting data for the service itself is generated by a service terminal, receiving, by a master server, the first packet from the service terminal; (b) allowing, by the master server, a first model to classify cause data of the error event included in the first packet into categories; and (c) by the master server, (i) allowing a second model to select guide data for category data corresponding to the cause data of the error event, (ii) generating a second packet including the cause data, the category data, and the guide data, and then transmitting the second packet to a developer terminal, and (iii) performing at least some of a process of correcting the first model with reference to the category data and the first response data, when a third packet including first response data for the category data included in the second packet is received from the developer terminal, and a process of correcting the second model with reference to the guide data and the second response data, when the third packet including the second response data for the guide data included in the second packet is received from the developer terminal.

Description

에러 이벤트에 대한 가이드 정보를 제공하기 위한 방법 및 서버{METHOD FOR PROVIDING GUIDE INFORMATION ON ERROR EVENT AND SERVER USING THE SAME}Method and server for providing guide information about error events

본 발명은 에러 이벤트에 대한 가이드 정보를 제공하기 위한 방법 및 서버에 관한 것으로, 보다 상세하게는, 에러 이벤트에 대한 원인을 추출하여 상기 에러 이벤트에 대한 가이드 정보를 제공해주고, 상기 가이드 정보를 제공해주는 과정에서 상기 에러 이벤트의 위험도 데이터에 대응되는 우선순위정보를 함께 제공하여 위험도가 높은 순서대로 처리하는 방법 및 서버에 관한 것이다.The present invention relates to a method and a server for providing guide information for an error event, and more particularly, to extract a cause for an error event, provide guide information for the error event, and provide the guide information The present invention relates to a method and a server for providing priority information corresponding to the risk data of the error event in the process and processing them in order of high risk.

종래에는 서비스를 이용함에 있어, 에러 이벤트가 발생하여 고객사에서 서비스를 사용하지 못하게 된 경우, 개발자가 발생된 에러 로그를 통해 에러 발생 지점 및 원인에 대해 온라인 또는 전화를 통해 원인을 파악한 후, 수정 작업이 진행되었다. Conventionally, when using the service, when an error event occurs and the customer cannot use the service, the developer identifies the cause of the error occurrence online or by phone through the error log generated, and then works to correct it. this went on

그러나, 이러한 방식은 프로그램 내의 논리적인 문제가 아닌, 사용자의 설정 실수, 잘못된 데이터, 네트워크 또는 타 프로그램과의 충돌 등과 같은 환경적인 문제 등 개발자가 간섭할 수 있는 영역이 아닌 경우, 파악 및 대응하는데 있어 많은 시간이 소요되고, 개발사의 인력이 낭비되며, 신뢰도 저하의 문제가 발생할 수 있었다.However, this method is not a logical problem in the program, but an environmental problem such as a user's setting mistake, incorrect data, network or conflict with other programs, etc. If it is not an area where the developer can interfere, it is difficult to identify and respond. It takes a lot of time, the developer's manpower is wasted, and the problem of reliability degradation may occur.

또한, 고객사에서는 에러가 발생한 기능이 필수적인 기능일 경우, 서비스를 이용하지 못함으로써 발생하는 업무 처리율 저하 및 마비로 인해 금전적인 손실까지 이어지는 문제가 발생할 수 있었다.In addition, if the function in which the error occurred is an essential function in the customer company, a problem could occur that could lead to financial loss due to a decrease in work processing rate and paralysis caused by inability to use the service.

이를 해결하기 위해 개발사에서는 추가적인 에러 이벤트 모니터링 시스템을 도입해 장비 정보, 에러 발생 위치, OS, 발생 경로 등의 에러 정보를 모니터링 하였지만, (1) 에러 발생 원인을 정확하게 식별하기 어렵다는 점, (2) 에러의 위험도 계산이 되지 않아 처리 순서를 유추할 수 없어 대응이 늦어진다는 점, (3) 과거에 처리한 에러와 유사한 에러가 발생하였음에도 불구하고 발생 원인을 다시 분석해야 하는 점 등의 문제가 있었다.To solve this problem, the developer introduced an additional error event monitoring system to monitor error information such as equipment information, error location, OS, and path of occurrence. There were problems such as a delay in response because the order of processing could not be inferred because the risk of risk was not calculated.

본 발명은 상술한 문제점을 해결하는 것을 목적으로 한다.An object of the present invention is to solve the above problems.

또한 본 발명은 에러 이벤트에 대해 AI 학습 기반으로 에러의 원인 식별을 통한 능동적 대응 가이드 정보를 제공함으로써, 에러 원인 분석 및 대응에 걸리는 시간을 감소시켜 인적 자원 낭비를 해소하고, 서비스 가용성을 최대화할 수 있도록 하는 것을 목적으로 한다.In addition, the present invention provides active response guide information through the identification of the cause of the error based on AI learning for the error event, thereby reducing the time it takes to analyze and respond to the cause of the error, thereby solving the waste of human resources and maximizing service availability. aim to make it

또한 본 발명은 에러 이벤트에 대한 위험도 데이터에 대응되는 우선순위정보를 개발자 단말에 송신하여 개발자가 처리 순서를 결정하여 시스템의 피해를 최소화하는 것을 목적으로 한다.In addition, an object of the present invention is to minimize damage to the system by transmitting priority information corresponding to risk data for an error event to the developer terminal, and the developer determines the processing order.

또한 본 발명은 개발자로부터 수신된 타겟 데이터를 참조로 하여, 에러 이벤트의 원인 데이터를 카테고리별로 분류하는 제1 모델을 보정하거나, 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터에 대한 가이드 데이터를 제공하는 제2 모델을 보정하여 AI를 지속적으로 학습시켜 업그레이드 시키는 것을 목적으로 한다.In addition, the present invention provides a first model for classifying the cause data of an error event by category with reference to the target data received from the developer, or providing guide data for category data corresponding to the cause data of the error event. 2 It aims to improve the AI by continuously learning the model by calibrating it.

상기한 바와 같은 본 발명의 목적을 달성하고, 후술하는 본 발명의 특징적인 효과를 실현하기 위한 본 발명의 특징적인 구성은 하기와 같다.The characteristic configuration of the present invention for achieving the object of the present invention as described above and for realizing the characteristic effects of the present invention to be described later is as follows.

본 발명의 일 태양에 따르면, 에러 이벤트에 대한 가이드 정보를 제공하기 위한 방법에 있어서, (a) 소정의 서비스에서 발생한 상기 에러 이벤트에 대하여, 상기 에러 이벤트에 대한 로그 데이터를 포함하는 에러 이벤트 데이터, 상기 서비스가 실행되는 환경 데이터 및 상기 서비스 자체에 대한 설정 데이터를 포함하는 제1 패킷이 서비스 단말에 의해 생성되면, 마스터 서버가 상기 제1 패킷을 상기 서비스 단말로부터 수신하는 단계; (b) 상기 마스터 서버가, 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 에러 이벤트의 원인 데이터를 카테고리별로 분류하도록 하는 단계; 및 (c) 상기 마스터 서버가, (i) 제2 모델로 하여금, 상기 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터에 대한 가이드 데이터를 선택하도록 하고, (ii) 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 제2 패킷을 생성한 후 상기 제2 패킷을 개발자 단말에 송신하고, (iii) 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 카테고리 데이터에 대한 제1 응답 데이터를 포함하는 제3 패킷이 수신되면, 상기 카테고리 데이터 및 상기 제1 응답 데이터를 참조로 하여 상기 제1 모델을 보정하는 프로세스, 및 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷이 수신되면, 상기 가이드 데이터 및 상기 제2 응답 데이터를 참조로 하여 상기 제2 모델을 보정하는 프로세스 중 적어도 일부를 수행하는 단계를 포함하는 것을 특징으로 하는 방법이 개시된다.According to one aspect of the present invention, in a method for providing guide information for an error event, (a) for the error event occurring in a predetermined service, error event data including log data for the error event; receiving, by a master server, the first packet from the service terminal when a first packet including environment data in which the service is executed and configuration data for the service itself is generated by the service terminal; (b) causing, by the master server, a first model to classify cause data of the error event included in the first packet into categories; and (c) the master server, (i) causing the second model to select guide data for category data corresponding to the cause data of the error event, (ii) the cause data, the category data and the After generating the second packet including the guide data, the second packet is transmitted to the developer terminal, and (iii) the second packet including the first response data to the category data included in the second packet from the developer terminal When 3 packets are received, the process of correcting the first model with reference to the category data and the first response data, and the second response data to the guide data included in the second packet from the developer terminal upon receiving the third packet comprising: performing at least part of a process of calibrating the second model with reference to the guide data and the second response data.

일례로서, 상기 (b) 단계에서, 상기 마스터 서버는, 상기 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 원인 데이터의 위험도 데이터를 추가적으로 산출하도록 하는 것을 특징으로 하고, 상기 (c) 단계에서, 상기 위험도 데이터가 기설정된 위험 임계치 이상으로 판단되면, 상기 마스터 서버가, 상기 원인 데이터, 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 위험도 데이터에 대응되는 제1 우선순위정보를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (b), the master server causes the first model to additionally calculate the risk data of the cause data included in the first packet, and the step (c) In, when the risk data is determined to be greater than or equal to a preset risk threshold, the master server, the second packet including the first priority information corresponding to the cause data, the category data, the guide data, and the risk data After generating a method is disclosed, characterized in that for transmitting the second packet to the developer terminal.

일례로서, 상기 (c) 단계에서, 상기 위험도 데이터가 기설정된 위험 임계치 미만으로 판단되면, 상기 마스터 서버가, 상기 위험도 데이터에 대응되는 제2 우선순위정보 - 상기 제2 우선순위정보는 상기 제1 우선순위정보보다 우선순위가 낮음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하되, 기설정된 시간 구간 동안 상기 에러 이벤트의 발생 횟수가 소정의 발생 임계치 이상인 것으로 감지되면, 상기 마스터 서버가, 상기 위험도 데이터에 대응되는 제3 우선순위정보 - 상기 제3 우선순위정보는 상기 제2 우선순위정보보다 우선순위가 높음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (c), if the risk data is determined to be less than a preset risk threshold, the master server, the second priority information corresponding to the risk data - the second priority information is the first Priority lower than priority information - After generating the second packet including the cause data, the category data and the guide data, the second packet is transmitted to the developer terminal, but for a preset time period, the When it is detected that the number of occurrences of the error event is greater than or equal to a predetermined occurrence threshold, the master server, the third priority information corresponding to the risk data - The third priority information has a higher priority than the second priority information -, After generating the second packet including the cause data, the category data and the guide data, a method is disclosed, characterized in that for transmitting the second packet to the developer terminal.

일례로서, 상기 제3 패킷은, 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 추가적으로 포함하고, 상기 (c) 단계에서, 상기 마스터 서버는, 상기 제3 패킷에 포함된 상기 타겟 데이터를 참조로 하여, 상기 제3 패킷을 특정 모델 - 상기 특정 모델은, 상기 제1 모델 및 상기 제2 모델 중 상기 타겟 데이터에 대응되는 적어도 하나의 모델임 - 에 입력하며, 특정 응답 데이터 - 상기 특정 응답 데이터는 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 상기 타겟 데이터에 대응되는 적어도 하나의 데이터임 - 를 사용하여 상기 특정 모델을 보정하는 것을 특징으로 하는 방법이 개시된다.As an example, the third packet additionally includes target data corresponding to at least one of the first model and the second model, and in step (c), the master server is included in the third packet. With reference to the target data, the third packet is input to a specific model, wherein the specific model is at least one model corresponding to the target data among the first model and the second model, and a specific response Disclosed is a method comprising correcting the specific model using data, wherein the specific response data is at least one data corresponding to the target data among the first response data and the second response data.

일례로서, 상기 (b) 단계에서, 상기 제1 패킷에 포함된 상기 원인 데이터가 상기 제1 모델에서 미분류된 경우, 상기 마스터 서버는, 상기 (c) 단계에서, (i) 상기 제1 패킷을 상기 개발자 단말로 송신하고, (ii) 상기 개발자 단말로부터 상기 제1 패킷에 포함된 상기 원인 데이터에 대응되는 상기 카테고리 데이터에 대한 제1 응답 데이터 및 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷을 수신하고, (iii) 상기 원인 데이터 및 상기 카테고리 데이터를 참조로 하여 상기 제1 모델을 보정하고, 상기 카테고리 데이터 및 상기 가이드 데이터를 참조로 하여 상기 제2 모델을 보정하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (b), when the cause data included in the first packet is unclassified in the first model, the master server, in the step (c), (i) the first packet Transmitting to the developer terminal, (ii) from the developer terminal comprising the first response data to the category data corresponding to the cause data included in the first packet and the second response data to the guide data receiving a third packet, (iii) correcting the first model with reference to the cause data and the category data, and correcting the second model with reference to the category data and the guide data A method is disclosed.

일례로서, 상기 (a) 단계에서, 상기 제1 패킷은, (i) 상기 제1 패킷을 확인하고 재전송을 방지하기 위한 제1 패킷 시퀀스, (ii) 상기 제1 패킷의 생성 시간을 나타내는 제1 패킷 타임스탬프 및 (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대한 무결성을 검증하는 제1 해시 기반 코드를 더 포함하는 것을 특징으로 하는 방법이 개시된다.As an example, in step (a), the first packet includes: (i) a first packet sequence for confirming the first packet and preventing retransmission, (ii) a first packet indicating a generation time of the first packet A packet timestamp and (iii) a first hash-based code for verifying the integrity of the error event data, the environment data, and the configuration data is disclosed.

일례로서, 상기 (a) 단계에서, 상기 에러 이벤트 데이터는 상기 에러 이벤트에 관한 메시지, 상기 에러 이벤트가 발생된 스택, 상기 에러 이벤트가 발생된 모듈, 상기 에러 이벤트의 발생 시점의 매개변수 중 적어도 하나 이상을 포함하는 것을 특징으로 하고, 상기 환경 데이터는 상기 서비스가 실행되는 네트워크 상태 정보, CPU 상태 정보, Memory 상태 정보, Disk 상태 정보, 상기 서비스 단말에 설정된 환경 변수, 개발자가 추가적으로 설정해둔 값 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (a), the error event data is at least one of a message related to the error event, a stack in which the error event is generated, a module in which the error event is generated, and a parameter at the time of occurrence of the error event. It characterized in that it includes the above, wherein the environment data is at least one of network status information, CPU status information, Memory status information, Disk status information, environment variables set in the service terminal, and values additionally set by the developer in which the service is executed. A method comprising one or more is disclosed.

일례로서, 상기 (c) 단계에서, 상기 제2 패킷은, (i) 상기 제2 패킷을 확인하고 재전송을 방지하기 위한 제2 패킷 시퀀스, (ii) 상기 제2 패킷의 생성 시간을 나타내는 제2 패킷 타임스탬프, (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대응되는 로우 데이터, (iv) 상기 원인 데이터에 대응되는 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 로우 데이터에 대한 무결성을 검증하는 제2 해시 기반 코드, (v) 상기 원인 데이터에 대응되는 상기 카테고리 데이터의 크기 및 (vi) 상기 가이드 데이터의 크기를 더 포함하는 것을 특징으로 하는 방법이 개시된다.As an example, in step (c), the second packet includes: (i) a second packet sequence for confirming the second packet and preventing retransmission, (ii) a second packet indicating a generation time of the second packet Packet timestamp, (iii) raw data corresponding to the error event data, the environment data, and the setting data, (iv) verifying the integrity of the category data corresponding to the cause data, the guide data, and the raw data A second hash-based code to: (v) the size of the category data corresponding to the cause data, and (vi) the size of the guide data is disclosed.

일례로서, 상기 (c) 단계에서, 상기 제3 패킷은, (i) 상기 제3 패킷을 확인하고 재전송을 방지하기 위한 제3패킷 시퀀스, (ii) 상기 제3패킷의 생성 시간을 나타내는 제3패킷 타임스탬프, (iii) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 무결성을 검증하는 제3 해시 기반 코드, (iv) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 크기 및 (v) 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 더 포함하는 것을 특징으로 하는 방법이 개시된다.As an example, in step (c), the third packet includes (i) a third packet sequence for confirming the third packet and preventing retransmission, and (ii) a third packet indicating a generation time of the third packet. a packet timestamp, (iii) a third hash-based code that verifies the integrity of at least one of the first response data and the second response data, (iv) at least one of the first response data and the second response data A method is disclosed, further comprising a size for one or more and (v) target data corresponding to at least one of the first model and the second model.

일례로서, 상기 (c) 단계에서, 상기 제2 패킷을 상기 개발자 단말에 송신한 시각으로부터 임계 시간 이상으로 상기 제2 패킷에 대한 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 일부가 수신되지 않을 경우, 상기 마스터 서버는, 상기 개발자 단말에 상기 제2 패킷을 기설정된 시간 간격으로 반복하여 재송신하고, 상기 반복하여 재송신하는 횟수가 기설정된 제2 횟수를 만족하면, 상기 제2 패킷에 대응되는 상기 제1 응답 데이터 및 상기 제2 응답 데이터를 없음으로 판단하는 것을 특징으로 하는 방법이 개시된다.As an example, in step (c), at least a portion of the first response data and the second response data for the second packet is not received for more than a threshold time from the time when the second packet is transmitted to the developer terminal. If not, the master server repeatedly retransmits the second packet to the developer terminal at a preset time interval, and if the number of repeating retransmission satisfies a preset second number of times, the second packet is Disclosed is a method comprising determining that the first response data and the second response data are none.

본 발명의 다른 태양에 따르면, 에러 이벤트에 대한 가이드 정보를 제공하기 위한 마스터 서버에 있어서, 인스트럭션들을 저장하는 하나 이상의 메모리; 및 상기 인스트럭션들을 수행하도록 설정된 하나 이상의 프로세서를 포함하되, 상기 프로세서가, (I) 소정의 서비스에서 발생한 상기 에러 이벤트에 대하여, 상기 에러 이벤트에 대한 로그 데이터를 포함하는 에러 이벤트 데이터, 상기 서비스가 실행되는 환경 데이터 및 상기 서비스 자체에 대한 설정 데이터를 포함하는 제1 패킷이 서비스 단말에 의해 생성되면, 상기 제1 패킷을 상기 서비스 단말로부터 수신하는 프로세스; (II) 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 에러 이벤트의 원인 데이터를 카테고리별로 분류하도록 하는 프로세스; 및 (III) (i) 제2 모델로 하여금, 상기 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터에 대한 가이드 데이터를 선택하도록 하고, (ii) 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 제2 패킷을 생성한 후 상기 제2 패킷을 개발자 단말에 송신하고, (iii) 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 카테고리 데이터에 대한 제1 응답 데이터를 포함하는 제3 패킷이 수신되면, 상기 카테고리 데이터 및 상기 제1 응답 데이터를 참조로 하여 상기 제1 모델을 보정하는 프로세스, 및 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷이 수신되면, 상기 가이드 데이터 및 상기 제2 응답 데이터를 참조로 하여 상기 제2 모델을 보정하는 프로세스 중 적어도 일부를 수행하는 프로세스를 수행하는 것을 특징으로 하는 마스터 서버가 개시된다.According to another aspect of the present invention, there is provided a master server for providing guide information for an error event, comprising: one or more memories for storing instructions; and one or more processors configured to execute the instructions, wherein the processor is configured to: (I) error event data including log data for the error event, for the error event occurring in a predetermined service, the service is executed a process of receiving the first packet from the service terminal when a first packet including environment data to be used and configuration data for the service itself is generated by the service terminal; (II) a process of causing a first model to classify cause data of the error event included in the first packet into categories; and (III) (i) causing the second model to select guide data for category data corresponding to the cause data of the error event, and (ii) including the cause data, the category data, and the guide data. After generating the second packet, the second packet is transmitted to the developer terminal, and (iii) when a third packet including the first response data for the category data included in the second packet is received from the developer terminal , a process of calibrating the first model with reference to the category data and the first response data, and the third including second response data to the guide data included in the second packet from the developer terminal When a packet is received, a master server is disclosed that performs a process of performing at least a part of a process of correcting the second model with reference to the guide data and the second response data.

일례로서, 상기 (II) 프로세스에서, 상기 프로세서는, 상기 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 원인 데이터의 위험도 데이터를 추가적으로 산출하도록 하는 것을 특징으로 하고, 상기 (III) 프로세스에서, 상기 위험도 데이터가 기설정된 위험 임계치 이상으로 판단되면, 상기 프로세서가, 상기 원인 데이터, 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 위험도 데이터에 대응되는 제1 우선순위정보를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the process (II), the processor causes the first model to additionally calculate risk data of the cause data included in the first packet, and in the process (III) , when it is determined that the risk data is greater than or equal to a preset risk threshold, the processor generates the second packet including first priority information corresponding to the cause data, the category data, the guide data, and the risk data. After the master server is disclosed, characterized in that for transmitting the second packet to the developer terminal.

일례로서, 상기 (III) 프로세스에서, 상기 위험도 데이터가 기설정된 위험 임계치 미만으로 판단되면, 상기 프로세서가, 상기 위험도 데이터에 대응되는 제2 우선순위정보 - 상기 제2 우선순위정보는 상기 제1 우선순위정보보다 우선순위가 낮음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하되, 기설정된 시간 구간 동안 상기 에러 이벤트의 발생 횟수가 소정의 발생 임계치 이상인 것으로 감지되면, 상기 프로세서가, 상기 위험도 데이터에 대응되는 제3 우선순위정보 - 상기 제3 우선순위정보는 상기 제2 우선순위정보보다 우선순위가 높음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the (III) process, if the risk data is determined to be less than a preset risk threshold, the processor, the second priority information corresponding to the risk data - the second priority information is the first priority Priority lower than priority information -, after generating the second packet including the cause data, the category data, and the guide data, the second packet is transmitted to the developer terminal, but the error during a preset time period When it is detected that the number of occurrences of the event is greater than or equal to a predetermined occurrence threshold, the processor, third priority information corresponding to the risk data - the third priority information has a higher priority than the second priority information -, After generating the second packet including the cause data, the category data and the guide data, the master server is disclosed, characterized in that for transmitting the second packet to the developer terminal.

일례로서, 상기 제3 패킷은, 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 추가적으로 포함하고, 상기 (III) 프로세스에서, 상기 프로세서는, 상기 제3 패킷에 포함된 상기 타겟 데이터를 참조로 하여, 상기 제3 패킷을 특정 모델 - 상기 특정 모델은, 상기 제1 모델 및 상기 제2 모델 중 상기 타겟 데이터에 대응되는 적어도 하나의 모델임 - 에 입력하며, 특정 응답 데이터 - 상기 특정 응답 데이터는 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 상기 타겟 데이터에 대응되는 적어도 하나의 데이터임 - 를 사용하여 상기 특정 모델을 보정하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, the third packet further includes target data corresponding to at least one of the first model and the second model, and in the process (III), the processor includes: With reference to the target data, the third packet is input to a specific model, wherein the specific model is at least one model corresponding to the target data among the first model and the second model, and specific response data The specific response data is at least one data corresponding to the target data among the first response data and the second response data. A master server is disclosed, characterized in that it corrects the specific model.

일례로서, 상기 (II) 프로세스에서, 상기 제1 패킷에 포함된 상기 원인 데이터가 상기 제1 모델에서 미분류된 경우, 상기 프로세서는, 상기 (III) 프로세스에서, (i) 상기 제1 패킷을 상기 개발자 단말로 송신하고, (ii) 상기 개발자 단말로부터 상기 제1 패킷에 포함된 상기 원인 데이터에 대응되는 상기 카테고리 데이터에 대한 제1 응답 데이터 및 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷을 수신하고, (iii) 상기 원인 데이터 및 상기 카테고리 데이터를 참조로 하여 상기 제1 모델을 보정하고, 상기 카테고리 데이터 및 상기 가이드 데이터를 참조로 하여 상기 제2 모델을 보정하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the process (II), when the cause data included in the first packet is unclassified in the first model, in the process (III), (i) the first packet is Transmitting to the developer terminal, (ii) the first response data to the category data corresponding to the cause data included in the first packet from the developer terminal and the second response data including the second response data to the guide data receiving 3 packets, (iii) correcting the first model with reference to the cause data and the category data, and correcting the second model with reference to the category data and the guide data The master server is started.

일례로서, 상기 (I) 프로세스에서, 상기 제1 패킷은, (i) 상기 제1 패킷을 확인하고 재전송을 방지하기 위한 제1 패킷 시퀀스, (ii) 상기 제1 패킷의 생성 시간을 나타내는 제1 패킷 타임스탬프 및 (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대한 무결성을 검증하는 제1 해시 기반 코드를 더 수행하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the process (I), the first packet includes: (i) a first packet sequence for confirming the first packet and preventing retransmission, (ii) a first packet indicating a generation time of the first packet A packet timestamp and (iii) a first hash-based code for verifying the integrity of the error event data, the environment data, and the configuration data is disclosed.

일례로서, 상기 (I) 프로세스에서, 상기 에러 이벤트 데이터는 상기 에러 이벤트에 관한 메시지, 상기 에러 이벤트가 발생된 스택, 상기 에러 이벤트가 발생된 모듈, 상기 에러 이벤트의 발생 시점의 매개변수 중 적어도 하나 이상을 포함하는 것을 특징으로 하고, 상기 환경 데이터는 상기 서비스가 실행되는 네트워크 상태 정보, CPU 상태 정보, Memory 상태 정보, Disk 상태 정보, 상기 서비스 단말에 설정된 환경 변수, 개발자가 추가적으로 설정해둔 값 중 적어도 하나 이상을 수행하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the process (I), the error event data is at least one of a message related to the error event, a stack in which the error event is generated, a module in which the error event is generated, and a parameter of an occurrence time of the error event It characterized in that it includes the above, wherein the environment data is at least one of network status information, CPU status information, Memory status information, Disk status information, environment variables set in the service terminal, and values additionally set by the developer in which the service is executed. Disclosed is a master server characterized by performing one or more.

일례로서, 상기 (III) 프로세스에서, 상기 제2 패킷은, (i) 상기 제2 패킷을 확인하고 재전송을 방지하기 위한 제2 패킷 시퀀스, (ii) 상기 제2 패킷의 생성 시간을 나타내는 제2 패킷 타임스탬프, (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대응되는 로우 데이터, (iv) 상기 원인 데이터에 대응되는 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 로우 데이터에 대한 무결성을 검증하는 제2 해시 기반 코드, (v) 상기 원인 데이터에 대응되는 상기 카테고리 데이터의 크기 및 (vi) 상기 가이드 데이터의 크기를 더 수행하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the process (III), the second packet includes: (i) a second packet sequence for confirming the second packet and preventing retransmission, (ii) a second packet indicating a generation time of the second packet Packet timestamp, (iii) raw data corresponding to the error event data, the environment data, and the setting data, (iv) verifying the integrity of the category data corresponding to the cause data, the guide data, and the raw data A second hash-based code to, (v) the size of the category data corresponding to the cause data, and (vi) the size of the guide data is disclosed.

일례로서, 상기 (III) 프로세스에서, 상기 제3 패킷은, (i) 상기 제3 패킷을 확인하고 재전송을 방지하기 위한 제3패킷 시퀀스, (ii) 상기 제3패킷의 생성 시간을 나타내는 제3패킷 타임스탬프, (iii) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 무결성을 검증하는 제3 해시 기반 코드, (iv) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 크기 및 (v) 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 더 수행하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the process (III), the third packet includes: (i) a third packet sequence for confirming the third packet and preventing retransmission, (ii) a third packet indicating a generation time of the third packet a packet timestamp, (iii) a third hash-based code that verifies the integrity of at least one of the first response data and the second response data, (iv) at least one of the first response data and the second response data A size for one or more and (v) a master server characterized in that it further performs target data corresponding to at least one of the first model and the second model is disclosed.

일례로서, 상기 (III) 프로세스에서, 상기 제2 패킷을 상기 개발자 단말에 송신한 시각으로부터 임계 시간 이상으로 상기 제2 패킷에 대한 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 일부가 수신되지 않을 경우, 상기 프로세서는, 상기 개발자 단말에 상기 제2 패킷을 기설정된 시간 간격으로 반복하여 재송신하고, 상기 반복하여 재송신하는 횟수가 기설정된 제2 횟수를 만족하면, 상기 제2 패킷에 대응되는 상기 제1 응답 데이터 및 상기 제2 응답 데이터를 없음으로 판단하는 것을 특징으로 하는 마스터 서버가 개시된다.As an example, in the (III) process, at least a portion of the first response data and the second response data for the second packet is not received for more than a threshold time from the time when the second packet is transmitted to the developer terminal. If not, the processor repeatedly retransmits the second packet to the developer terminal at a preset time interval, and when the number of repeated retransmission satisfies a preset second number of times, the second packet corresponding to the Disclosed is a master server that determines that the first response data and the second response data are none.

본 발명은 에러 이벤트에 대해 AI 학습 기반으로 에러의 원인 식별을 통한 능동적 대응 가이드 정보를 제공함으로써, 에러 원인 분석 및 대응에 걸리는 시간을 감소시켜 인적 자원 낭비를 해소하고, 서비스 가용성을 최대화할 수 있는 효과가 있다.The present invention provides active response guide information through the identification of the cause of the error based on AI learning for the error event, thereby reducing the time it takes to analyze and respond to the cause of the error, thereby solving the waste of human resources and maximizing service availability. It works.

또한 본 발명은 에러 이벤트에 대한 위험도 데이터에 대응되는 우선순위정보를 개발자 단말에 송신하여 개발자가 처리 순서를 결정하여 시스템의 피해를 최소화하는 효과가 있다.In addition, the present invention has the effect of minimizing the damage to the system by transmitting the priority information corresponding to the risk data for the error event to the developer terminal to determine the processing order of the developer.

또한 본 발명은 개발자로부터 수신된 타겟 데이터를 참조로 하여, 에러 이벤트의 원인 데이터를 카테고리별로 분류하는 제1 모델을 보정하거나, 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터에 대한 가이드 데이터를 제공하는 제2 모델을 보정하여 AI를 지속적으로 학습시켜 업그레이드 할 수 있는 효과가 있다.In addition, the present invention provides a first model for classifying the cause data of an error event by category with reference to the target data received from the developer, or providing guide data for category data corresponding to the cause data of the error event. 2 By calibrating the model, it has the effect of continuously learning the AI and upgrading it.

도 1은 본 발명의 일 실시예에 따른 에러 이벤트에 대한 원인 추출 및 위험도 산출을 통한 에러 이벤트에 대한 가이드 정보를 제공하는 전체 시스템의 구성을 개략적으로 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 마스터 서버가 사용자 단말로부터 발생한 에러 이벤트를 수신하여 원인 데이터를 카테고리별로 분류하고, 카테고리에 대응되는 가이드 데이터를 개발자 단말에 제공하는 과정을 나타낸 순서도이다.
도 3은 본 발명의 일 실시예에 따른 마스터 서버에서 분류된 원인 데이터에 대응되는 카테고리 데이터 및 카테고리 데이터에 대응되는 가이드 데이터에 대한 응답 데이터를 획득하는 과정을 나타낸 순서도이다.
도 4는 본 발명의 일 실시예에 따른 개발자 단말로부터 수신된 응답 데이터를 참조로 하여, 에러 이벤트의 원인 데이터를 카테고리별로 분류하는 모델 및 카테고리 데이터에 대한 가이드 데이터를 제공하는 모델에 대해 재학습하는 과정을 나타낸 순서도이다.1 is a diagram schematically showing the configuration of an entire system that provides guide information for an error event through extraction of a cause for an error event and calculating a risk level according to an embodiment of the present invention.
2 is a flowchart illustrating a process in which a master server receives an error event generated from a user terminal, classifies cause data by category, and provides guide data corresponding to the category to a developer terminal according to an embodiment of the present invention.
3 is a flowchart illustrating a process of acquiring category data corresponding to the classified cause data and response data to guide data corresponding to the category data in the master server according to an embodiment of the present invention.
4 is with reference to the response data received from the developer terminal according to an embodiment of the present invention, the model for classifying the cause data of the error event by category and the model for providing guide data for the category data re-learning A flowchart showing the process.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0012] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0014] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0016] Reference is made to the accompanying drawings, which show by way of illustration specific embodiments in which the present invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the present invention. It should be understood that the various embodiments of the present invention are different but need not be mutually exclusive. For example, certain shapes, structures, and characteristics described herein with respect to one embodiment may be implemented in other embodiments without departing from the spirit and scope of the invention. In addition, it should be understood that the location or arrangement of individual components within each disclosed embodiment may be changed without departing from the spirit and scope of the present invention. Accordingly, the detailed description set forth below is not intended to be taken in a limiting sense, and the scope of the present invention, if properly described, is limited only by the appended claims, along with all scope equivalents to those claimed. Like reference numerals in the drawings refer to the same or similar functions throughout the various aspects.

이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art can easily practice the present invention.

도 1은 본 발명의 일 실시예에 따른 에러 이벤트에 대한 원인 추출 및 위험도 산출을 통한 에러 이벤트에 대한 가이드 정보를 제공하는 전체 시스템의 구성을 개략적으로 나타낸 도면이다.1 is a diagram schematically showing the configuration of an entire system that provides guide information for an error event through extraction of a cause for an error event and calculating a risk level according to an embodiment of the present invention.

도 1을 참조하면, 본 발명에 따른 에러 이벤트에 대한 가이드 정보를 제공하기 위한 프로세스는 사용자가 서비스를 이용하던 중 에러 이벤트 발생 시, 사용자 단말(200)에서 발생한 에러 이벤트에 대해 가이드 정보를 제공해주기 위해 에러 이벤트에 대한 로그 데이터를 포함하는 에러 이벤트 데이터(201), 서비스가 실행되는 환경 데이터(202) 및 서비스 자체에 대한 설정 데이터(203)를 포함하는 제1 패킷(A)(소위, EEC : Event log & Environment & Configuration 패킷에 해당함)을 마스터 서버(100)로 송신할 수 있다.Referring to FIG. 1 , the process for providing guide information for an error event according to the present invention provides guide information for an error event occurring in the user terminal 200 when an error event occurs while a user is using a service A first packet (A) (so-called, EEC: Event log & Environment & Configuration packet) can be transmitted to the master server 100 .

다음으로, 제1 패킷(A)을 수신한 마스터 서버(100)는, 에러 이벤트의 원인 데이터를 카테고리별로 분류하여 카테고리 데이터를 제공하는 제1 모델(101)(소위, ERC : Error event Reason Classification 모델에 해당함) 및 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터에 대한 가이드 데이터를 제공하는 제2 모델(102)(소위, EEG : Error event Guide 모델에 해당함)을 참조로 하여, 원인 데이터, 원인 데이터에 대응되는 카테고리 데이터 및 카테고리 데이터에 대응되는 가이드 데이터를 포함한 제2 패킷(B)(소위, EGI : Error & Guide Info 패킷에 해당함)을 개발자 단말(300)로 송신하고, 개발자 단말(300)은 원인 데이터에 대응되는 카테고리 데이터(301)의 분류가 맞게 분류되었는지, 분류된 카테고리 데이터(301)에 대한 가이드 데이터(302)가 올바른지 확인하여 피드백, 즉, 응답 데이터를 마스터 서버(100)로 송신하게 되는데, 개발자 단말(300)로부터 제2 패킷(B)에 포함된 카테고리 데이터(301)에 대한 제1 응답 데이터를 포함하는 제3 패킷(C)(소위, Feedback 패킷에 해당함)을 마스터 서버(100)가 수신하게 되면, 마스터 서버(100)는, 카테고리 데이터(301)에 대한 제1 응답 데이터를 참조로 하여 제1 모델(101)을 보정할 수 있고, 개발자 단말(300)로부터 제2 패킷(B)에 포함된 가이드 데이터(302)에 대한 제2 응답 데이터를 포함하는 제3 패킷(C)을 마스터 서버(200)가 수신하게 되면, 마스터 서버(100)는, 가이드 데이터(302) 및 제2 응답 데이터를 참조로 하여 제2 모델(102)을 보정하는 프로세스 중 적어도 일부를 수행할 수 있다. 보다 상세하게는, 아래에서 도 2, 도 3 및 도 4를 참조하여 설명하도록 한다.Next, the master server 100 receiving the first packet (A) classifies the cause data of the error event by category and provides the category data by the first model 101 (so-called ERC: Error event Reason Classification model) ) and the second model 102 that provides guide data for category data corresponding to the cause data of the error event (so-called EEG: Corresponding to the Error event guide model), the cause data and the cause data A second packet (B) (so-called, EGI: Corresponding to Error & Guide Info packet) including corresponding category data and guide data corresponding to the category data is transmitted to the developer terminal 300, and the developer terminal 300 is the cause It is checked whether the classification of the category data 301 corresponding to the data is correctly classified and whether the guide data 302 for the classified category data 301 is correct, and feedback, that is, response data is transmitted to the master server 100 . , a third packet (C) (so-called, corresponding to a Feedback packet) including the first response data to the category data 301 included in the second packet (B) from the developer terminal 300 to the master server 100 is received, the master server 100 may correct the first model 101 with reference to the first response data for the category data 301, and the second packet B from the developer terminal 300 ) When the master server 200 receives the third packet (C) including the second response data to the guide data 302 included in the guide data 302, the master server 100, the guide data 302 and the second At least part of the process of calibrating the second model 102 with reference to the response data may be performed. In more detail, it will be described with reference to FIGS. 2, 3 and 4 below.

여기서 응답 데이터(303)는 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터(301)에 대한 개발자의 피드백인 제1 응답데이터 및 카테고리 데이터(301)에 대응되는 가이드 데이터(302)에 대한 개발자의 피드백인 제2 응답데이터를 적어도 하나 이상 포함할 수 있다. Here, the response data 303 is the developer's feedback for the first response data and the guide data 302 corresponding to the category data 301, which is the developer's feedback for the category data 301 corresponding to the cause data of the error event. It may include at least one or more second response data.

여기서, 개발자 단말(300)에 도시되어 있는 카테고리 데이터(301)는 마스터 서버(100)에서 제1 모델(101)을 통해 분류된 원인 데이터에 대응되는 카테고리 데이터(301)를 포함할 수도 있다.Here, the category data 301 shown in the developer terminal 300 may include category data 301 corresponding to the cause data classified through the first model 101 in the master server 100 .

또한, 개발자 단말(300)에 도시되어 있는 가이드 데이터(302)는 마스터 서버(100)에서 제2 모델(102)을 통해 제공된 카테고리 데이터(301)에 대한 가이드 데이터(302)를 포함할 수도 있다.In addition, the guide data 302 shown in the developer terminal 300 may include guide data 302 for the category data 301 provided through the second model 102 in the master server 100 .

추가적으로, 제1 모델(101)로 하여금, 제1 패킷(A)에 포함된 원인 데이터의 위험도 데이터를 추가적으로 산출하도록 하는 것을 특징으로 하고, 위험도 데이터가 기설정된 위험 임계치 이상으로 판단되면, 마스터 서버(100)가, 원인 데이터, 카테고리 데이터, 가이드 데이터 및 위험도 데이터에 대응되는 제1 우선순위정보를 포함하는 제2 패킷(B)을 생성한 후 제2 패킷(B)을 개발자 단말(300)에 송신할 수 있다.Additionally, it is characterized in that the first model 101 additionally calculates the risk data of the cause data included in the first packet (A), and when the risk data is determined to be greater than or equal to a preset risk threshold, the master server ( 100) transmits the second packet (B) to the developer terminal 300 after generating the second packet (B) including the first priority information corresponding to the cause data, the category data, the guide data, and the risk data can do.

또한, 위험도 데이터가 기설정된 위험 임계치 미만으로 판단되면, 마스터 서버(100)가, 위험도 데이터에 대응되는 제2 우선순위정보(제2 우선순위정보는 상기 제1 우선순위정보보다 우선순위가 낮음), 원인 데이터, 카테고리 데이터(301) 및 가이드 데이터(302)를 포함하는 제2 패킷(B)을 생성한 후 제2 패킷(B)을 개발자 단말(300)에 송신할 수 있다. 다만, 이 경우, 기설정된 시간 구간 동안 에러 이벤트의 발생 횟수가 소정의 발생 임계치 이상인 것으로 감지되면, 마스터 서버(100)가, 위험도 데이터에 대응되는 제3 우선순위정보(제3 우선순위정보는 상기 제2 우선순위정보보다 우선순위가 높음), 원인 데이터, 카테고리 데이터(301) 및 가이드 데이터(302)를 포함하는 제2 패킷(B)을 생성한 후 제2 패킷(B)을 개발자 단말(300)에 송신할 수 있다.In addition, if the risk data is determined to be less than the preset risk threshold, the master server 100, the second priority information corresponding to the risk data (the second priority information has a lower priority than the first priority information) , after generating the second packet (B) including the cause data, the category data 301 and the guide data 302 may transmit the second packet (B) to the developer terminal (300). However, in this case, if it is detected that the number of occurrences of the error event during the preset time period is equal to or greater than a predetermined occurrence threshold, the master server 100 controls the third priority information corresponding to the risk data (the third priority information is the After generating the second packet (B) including the second priority information (higher priority than the second priority information), cause data, category data 301 and guide data 302, the second packet (B) is sent to the developer terminal 300 ) can be sent to

한편, 사용자 단말(200)에서 에러 이벤트 발생 시, 사용자 단말(200)은, 에러 이벤트에 대하여, 에러 이벤트에 대한 로그 데이터를 포함하는 에러 이벤트 데이터(201), 서비스가 실행되는 환경 데이터(202) 및 서비스 자체에 대한 설정 데이터(203)를 수집하여 제1 패킷(A)을 생성한 후, 제1 패킷(A)을 사용자 단말(200)에 포함된 보안 제공자를 이용해 암호화를 한 뒤 마스터 서버(100)로 송신할 수 있다.On the other hand, when an error event occurs in the user terminal 200, the user terminal 200, with respect to the error event, error event data 201 including log data for the error event, environment data 202 in which the service is executed And after generating the first packet (A) by collecting the setting data 203 for the service itself, and encrypting the first packet (A) using the security provider included in the user terminal 200, the master server ( 100) can be sent.

여기서, 제1 패킷(A)은, 제1 패킷(A)을 확인하고 재전송을 방지하기 위한 제1 패킷 시퀀스, 제1 패킷(A)의 생성 시간을 나타내는 제1 패킷 타임스탬프 및 에러 이벤트 데이터(201), 환경 데이터(202) 및 설정 데이터(203)에 대한 무결성을 검증하는 제1 해시 기반 코드를 더 포함할 수 있다.Here, the first packet (A) includes a first packet sequence for confirming the first packet (A) and preventing retransmission, a first packet timestamp indicating the generation time of the first packet (A), and error event data ( 201), the environment data 202 and the setting data 203 may further include a first hash-based code that verifies the integrity.

또한, 에러 이벤트 데이터(201)는 에러 이벤트에 관한 메시지, 에러 이벤트가 발생된 스택, 에러 이벤트가 발생된 모듈, 에러 이벤트의 발생 시점의 매개변수 중 적어도 하나 이상을 포함할 수 있다.In addition, the error event data 201 may include at least one of a message related to the error event, a stack in which the error event is generated, a module in which the error event is generated, and parameters at the time of occurrence of the error event.

또한, 환경 데이터(202)는 서비스가 실행되는 네트워크 상태 정보, CPU 상태 정보, Memory 상태 정보, Disk 상태 정보, 서비스 단말에 설정된 환경 변수, 개발자가 추가적으로 설정해둔 값 중 적어도 하나 이상을 포함할 수 있다.In addition, the environment data 202 may include at least one or more of network status information in which the service is executed, CPU status information, Memory status information, Disk status information, environment variables set in the service terminal, and values additionally set by the developer. .

또한, 제2 패킷(B)은, 제2 패킷(B)을 확인하고 재전송을 방지하기 위한 제2 패킷 시퀀스, 제2 패킷(B)의 생성 시간을 나타내는 제2 패킷 타임스탬프, 에러 이벤트 데이터(201), 환경 데이터(202) 및 설정 데이터(203)에 대응되는 로우(raw) 데이터, 원인 데이터에 대응되는 카테고리 데이터(301), 가이드 데이터(302) 및 로우 데이터에 대한 무결성을 검증하는 제2 해시 기반 코드, 원인 데이터에 대응되는 카테고리 데이터(301)의 크기 및 가이드 데이터(302)의 크기를 더 포함할 수 있다.In addition, the second packet (B) includes a second packet sequence for confirming the second packet (B) and preventing retransmission, a second packet timestamp indicating the generation time of the second packet (B), and error event data ( 201), the environment data 202 and the raw data corresponding to the setting data 203, the category data 301 corresponding to the cause data, the guide data 302, and the second verifying the integrity of the raw data The hash-based code, the size of the category data 301 corresponding to the cause data, and the size of the guide data 302 may be further included.

또한, 제3 패킷(C)은, 제3 패킷(C)을 확인하고 재전송을 방지하기 위한 제3 패킷 시퀀스, 제3 패킷(C)의 생성 시간을 나타내는 제3 패킷 타임스탬프, 제1 응답 데이터 및 제2 응답 데이터 중 적어도 하나 이상에 대한 무결성을 검증하는 제3 해시 기반 코드, 제1 응답 데이터 및 제2 응답 데이터 중 적어도 하나 이상에 대한 크기 및 제1 모델(101) 및 제2 모델(102) 중 적어도 하나 이상에 대응되는 타겟 데이터를 더 포함할 수 있다. 여기서 타겟 데이터는 아래에서 도 4를 참조하여 설명하도록 한다.In addition, the third packet (C) includes a third packet sequence for confirming the third packet (C) and preventing retransmission, a third packet timestamp indicating a generation time of the third packet (C), and first response data and a third hash-based code that verifies the integrity of at least one or more of the second response data, a size of at least one of the first response data and the second response data, and the first model 101 and the second model 102 ) may further include target data corresponding to at least one or more. Here, the target data will be described with reference to FIG. 4 below.

아래에서는, 도 2를 참조로 하여 제1 패킷(A)을 수신한 마스터 서버(100)가 수행하는 프로세스에 대해 자세하게 설명하도록 하고, 도 3을 참조로 하여 제2 패킷(B)을 수신한 개발자 단말(300)이 수행하는 프로세스에 대해 자세하게 설명하도록 한다.Below, the process performed by the master server 100 receiving the first packet A will be described in detail with reference to FIG. 2 , and the developer receiving the second packet B with reference to FIG. 3 . A process performed by the terminal 300 will be described in detail.

도 2는 본 발명의 일 실시예에 따른 마스터 서버가 사용자 단말로부터 발생한 에러 이벤트를 수신하여 원인 데이터를 카테고리별로 분류하고, 카테고리에 대응되는 가이드 데이터를 개발자 단말에 제공하는 과정을 나타낸 순서도이다.2 is a flowchart illustrating a process in which a master server receives an error event generated from a user terminal, classifies cause data by category, and provides guide data corresponding to the category to a developer terminal according to an embodiment of the present invention.

보다 상세하게, 도 1 및 도 2를 참조하면, 마스터 서버(100)는 사용자 단말(200)로부터 제1 패킷(A)을 수신한 후(S110), 수신한 제1 패킷(A)의 구조가 올바른지 사용자 단말(200)에 포함된 보안 제공자를 통해 검증하고(S120), 유효한 패킷으로 판단되는 경우(S130), 제1 모델(101)을 이용해 원인 데이터를 카테고리별로 분류하기 위한 시도를 할 수 있고(S140), 원인 데이터가 특정 카테고리로 분류되는지 판단하여(S150), 원인 데이터가 특정 카테고리로 분류되었다면 제2 모델(102)을 이용해서 가이드 데이터(302)에 대한 검색을 수행할 수 있으며(S160), 가이드 데이터(302)에 대한 검색에 성공한 경우(S170), 상기에서 분류된 카테고리 데이터(301) 및 가이드 데이터(302)를 이용해 제2 패킷(B)을 생성하여(S180) 개발자 단말(300)로 송신할 수 있다.In more detail, referring to FIGS. 1 and 2 , the master server 100 receives the first packet A from the user terminal 200 ( S110 ), and the structure of the received first packet A is It is verified through the security provider included in the user terminal 200 whether it is correct (S120), and when it is determined as a valid packet (S130), an attempt can be made to classify the cause data into categories using the first model 101, (S140), it is determined whether the cause data is classified into a specific category (S150), and if the cause data is classified into a specific category, a search for the guide data 302 can be performed using the second model 102 (S160) ), when the search for the guide data 302 is successful (S170), the second packet (B) is generated using the category data 301 and the guide data 302 classified above (S180), the developer terminal 300 ) can be sent.

여기서, 제1 패킷(A)의 구조가 유효하지 않을 경우, 해당 제1 패킷(A)을 폐기할 수도 있다(S131).Here, when the structure of the first packet A is not valid, the corresponding first packet A may be discarded ( S131 ).

또한, 마스터 서버(100)로 수신된 제1 패킷(A)에 포함된 원인 데이터에 대한 카테고리가 제1 모델(101)에 의해 미분류된 경우(S151) 및/또는 분류된 카테고리 데이터(301)에 대한 가이드 데이터(302)가 존재하지 않을 경우(S171), 마스터 서버(100)는, 타겟 데이터를 "없음"으로 설정하여 제2 패킷(B)을 생성한 후 제2 패킷(B)을 개발자 단말(300)로 송신할 수 있다. 다른 예로서, 도면에 도시되지는 않았지만, 원인 데이터에 대한 카테고리 데이터(301)가 제1 모델(101)에 의해 미분류된 경우(S151), 제2 패킷(B)을 생성하지 않고 제1 패킷(A)을 곧바로 개발자 단말(300)로 송신할 수도 있다.In addition, when the category for the cause data included in the first packet (A) received to the master server 100 is unclassified by the first model 101 (S151) and/or in the classified category data 301 When the guide data 302 for the information does not exist (S171), the master server 100 sets the target data to "none" to generate the second packet (B) and then sends the second packet (B) to the developer's terminal. It can be sent to (300). As another example, although not shown in the drawing, when the category data 301 for the cause data is unclassified by the first model 101 (S151), the second packet B is not generated and the first packet ( A) may be directly transmitted to the developer terminal 300 .

이후에, 마스터 서버(100)는, 개발자 단말(300)로부터 제1 패킷(A)에 포함된 원인 데이터에 대응되는 카테고리 데이터(301)에 대한 제1 응답 데이터 및 가이드 데이터(302)에 대한 제2 응답 데이터를 포함하는 제3 패킷(C)을 수신한 후, 원인 데이터 및 카테고리 데이터(301)를 참조로 하여 제1 모델(101)을 보정하고, 카테고리 데이터(301) 및 가이드 데이터(302)를 참조로 하여 제2 모델(102)을 보정할 수 있다. 보다 자세하게는 아래에서 도 4를 참조하여 설명하도록 한다.After that, the master server 100, the first response data for the category data 301 corresponding to the cause data included in the first packet (A) from the developer terminal 300 and the guide data 302 for the first response data (302) 2 After receiving the third packet C including the response data, the first model 101 is corrected with reference to the cause data and the category data 301, and the category data 301 and the guide data 302 are The second model 102 may be corrected with reference to . In more detail, it will be described with reference to FIG. 4 below.

도 3은 본 발명의 일 실시예에 따른 마스터 서버에서 분류된 원인 데이터에 대응되는 카테고리 데이터 및 카테고리 데이터에 대응되는 가이드 데이터에 대한 응답 데이터를 획득하는 과정을 나타낸 순서도이다.3 is a flowchart illustrating a process of acquiring category data corresponding to the classified cause data and response data to guide data corresponding to the category data in the master server according to an embodiment of the present invention.

도 1 및 도 3을 참조하면, 개발자 단말(300)은 마스터 서버(100)로부터 제2 패킷(B)을 수신하고(S210), 제2 패킷(B)의 구조가 올바른지 개발자 단말(300)에 포함된 보안 제공자를 통해 검증한 후(S220), 유효한 패킷일 경우, 제2 패킷(B)으로부터 원인 데이터를 추출하여, 원인 데이터에 대응되는 카테고리 데이터(301)가 존재하는지 확인하고(S230), 분류된 카테고리 데이터(301)에 대한 가이드 데이터(302)가 존재하는지 확인한 뒤(S240), 분류된 카테고리 데이터(301)에 대한 가이드 데이터(302)가 존재할 경우 이를 확인하고(S250), 개발자에게 카테고리 데이터(301) 및 가이드 데이터(302)를 제공할 수 있다(S260). 이후, 개발자로부터 기설정된 시간동안 개발자의 응답 데이터를 대기하고(S270), 개발자의 카테고리 데이터(301)에 대한 제1 응답 데이터 및/또는 가이드 데이터(302)에 대한 제2 응답 데이터가 획득되면, 이를 통해 제3 패킷(C)을 생성하여(S280) 마스터 서버(100)로 송신할 수 있다.1 and 3, the developer terminal 300 receives the second packet (B) from the master server 100 (S210), and the developer terminal 300 checks whether the structure of the second packet (B) is correct. After verification through the included security provider (S220), if it is a valid packet, the cause data is extracted from the second packet (B), and the category data 301 corresponding to the cause data is checked (S230), After confirming whether the guide data 302 for the classified category data 301 exists (S240), if there is guide data 302 for the classified category data 301, it is checked (S250), and the category to the developer Data 301 and guide data 302 may be provided (S260). After that, when the developer waits for the developer's response data for a preset time (S270), and the first response data for the developer's category data 301 and/or the second response data for the guide data 302 is obtained, Through this, a third packet (C) can be generated (S280) and transmitted to the master server (100).

여기서, 도면에 도시되지는 않았지만, 제2 패킷(B)의 구조가 유효하지 않을 경우, 제2 패킷(B)의 원인 데이터만을 개발자에게 제공하여, 원인 데이터에 대응되는 카테고리 데이터(301)에 대한 제1 응답 데이터 및 가이드 데이터(302)에 대한 제2 응답 데이터를 포함한 제3 패킷(C)을 생성하여 마스터 서버(100)로 송신할 수도 있다.Here, although not shown in the drawing, when the structure of the second packet B is not valid, only the cause data of the second packet B is provided to the developer, and the category data 301 corresponding to the cause data is provided to the developer. A third packet C including the first response data and the second response data for the guide data 302 may be generated and transmitted to the master server 100 .

또한, 마스터 서버(100)로부터 수신된 카테고리 데이터(301)에 대한 가이드 데이터(302)가 존재하지 않을 경우(S241), 도면에 도시되지는 않았지만 개발자에게 제2 패킷(B)의 에러 이벤트의 원인 데이터 및 카테고리 데이터(302)를 제공할 수 있다.In addition, if the guide data 302 for the category data 301 received from the master server 100 does not exist (S241), although not shown in the figure, the cause of the error event of the second packet (B) to the developer Data and category data 302 may be provided.

여기서, 제3 패킷(C)은, 제1 모델(101) 및 제2 모델(102) 중 적어도 하나 이상에 대응되는 타겟 데이터를 추가적으로 포함하고, 마스터 서버(100)는, 제3 패킷(C)에 포함된 타겟 데이터를 참조로 하여, 제3 패킷(C)을 특정 모델(특정 모델은, 제1 모델(101) 및 제2 모델(102) 중 타겟 데이터에 대응되는 적어도 하나의 모델임)에 입력하며, 특정 응답 데이터(특정 응답 데이터는 제1 응답 데이터 및 제2 응답 데이터 중 타겟 데이터에 대응되는 적어도 하나의 데이터임)를 사용하여 특정 모델을 보정할 수 있다. 보다 자세하게는 아래에서 도 4를 참조하여 설명하도록 한다.Here, the third packet (C) additionally includes target data corresponding to at least one of the first model 101 and the second model 102, and the master server 100, the third packet (C) With reference to the target data included in the third packet (C) to a specific model (the specific model is at least one model corresponding to the target data among the first model 101 and the second model 102) In this case, the specific model may be corrected using specific response data (the specific response data is at least one data corresponding to target data among the first response data and the second response data). In more detail, it will be described with reference to FIG. 4 below.

도 4는 본 발명의 일 실시예에 따른 개발자 단말로부터 수신된 응답 데이터를 참조로 하여, 에러 이벤트의 원인 데이터를 카테고리별로 분류하는 모델 및 카테고리 데이터에 대한 가이드 데이터를 제공하는 모델에 대해 재학습하는 과정을 나타낸 순서도이다.4 is with reference to the response data received from the developer terminal according to an embodiment of the present invention, the model for classifying the cause data of the error event by category and the model for providing guide data for the category data re-learning A flowchart showing the process.

도 1 및 도 4를 참조하면, 마스터 서버(100)는 개발자 단말(300)로부터 제3 패킷(C)을 수신하고(S310), 수신한 제3 패킷(C)의 구조가 올바른지 마스터 서버(100)에 포함된 보안 제공자를 통해 검증한 후(S320), 유효한 패킷일 경우(S330), 응답 데이터(303)에 포함된 타겟 데이터가 존재하는지 여부를 판단하고(S340), 타겟 데이터가 존재하는 것으로 판단되면, 제1 모델(101) 및/또는 제2 모델(102)을 보정할 수 있다(S350).1 and 4 , the master server 100 receives the third packet (C) from the developer terminal 300 (S310), and checks whether the structure of the received third packet (C) is correct. After verification through the security provider included in (S320), if it is a valid packet (S330), it is determined whether the target data included in the response data 303 exists (S340), and it is determined that the target data exists. If it is determined, the first model 101 and/or the second model 102 may be corrected (S350).

여기서, 제3 패킷(C)의 구조가 유효하지 않을 경우(S331), 및/또는 타겟 데이터가 존재하지 않을 경우(S341), 해당 제3 패킷(C)을 폐기할 수도 있다.Here, when the structure of the third packet C is invalid (S331) and/or when the target data does not exist (S341), the third packet C may be discarded.

일례로, 마스터 서버(100)가 (i) 개발자 단말(300)로부터 수신한 제3 패킷(C)에 포함된 타겟 데이터가 제1 모델(101)에 대응되는 경우, 제1 학습 장치에 의해 제1 모델(101)을 보정(즉, 기계 학습)할 수도 있고, (ii) 개발자 단말(300)로부터 수신한 제3 패킷(C)에 포함된 타겟 데이터가 제2 모델(102)에 대응되는 경우, 제2 학습 장치에 의해 제2 모델(102)을 보정(즉, 기계 학습)할 수도 있고, (iii) 개발자 단말(300)로부터 수신한 제3 패킷(C)에 포함된 타겟 데이터가 제1 모델(101) 및 제2 모델(102)에 대응되는 경우, 제1 학습 장치에 의해 제1 모델(101)을 보정하고, 제2 학습 장치에 의해 제2 모델(102)을 보정할 수도 있다.As an example, when the target data included in the master server 100 (i) the third packet (C) received from the developer terminal 300 corresponds to the first model 101, the first learning device One model 101 may be corrected (ie, machine learning), and (ii) when the target data included in the third packet C received from the developer terminal 300 corresponds to the second model 102 . , the second model 102 may be corrected (ie, machine learning) by the second learning device, (iii) the target data included in the third packet (C) received from the developer terminal 300 is the first When the model 101 and the second model 102 correspond to each other, the first model 101 may be corrected by the first learning apparatus, and the second model 102 may be corrected by the second learning apparatus.

여기서, 제1 모델(101)이 완벽히 학습하지 않은 상태에서도 개발자 단말(300)과 인터랙션 하여, 제1 응답 데이터 및/또는 제2 응답 데이터를 수신할 수도 있다.Here, the first model 101 may interact with the developer terminal 300 even in a state in which it is not completely learned, and may receive the first response data and/or the second response data.

또한, 제2 패킷(B)을 개발자 단말(300)에 송신한 시각으로부터 임계 시간 이상으로 제2 패킷(B)에 대한 제1 응답 데이터 및 제2 응답 데이터 중 적어도 일부가 수신되지 않을 경우, 마스터 서버(100)는, 개발자 단말(300)에 제2 패킷(B)을 기설정된 시간 간격으로 반복하여 재송신하고, 반복하여 재송신하는 횟수가 기설정된 제2 횟수를 만족하면, 제2 패킷(B)에 대응되는 제1 응답 데이터 및 제2 응답 데이터를 없음으로 판단할 수도 있다.In addition, when at least a portion of the first response data and the second response data for the second packet (B) is not received for more than a threshold time from the time when the second packet (B) is transmitted to the developer terminal 300, the master The server 100 repeatedly retransmits the second packet (B) to the developer terminal 300 at a preset time interval, and the number of repeated retransmissions satisfies the preset second number of times, the second packet (B) It may be determined that there is no first response data and second response data corresponding to .

이상 설명된 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The embodiments according to the present invention described above may be implemented in the form of program instructions that can be executed through various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the computer-readable recording medium may be specially designed and configured for the present invention, or may be known and available to those skilled in the computer software field. Examples of the computer-readable recording medium include a hard disk, a magnetic medium such as a floppy disk and a magnetic tape, an optical recording medium such as a CD-ROM and DVD, and a magneto-optical medium such as a floppy disk. media), and hardware devices specially configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules to perform processing according to the present invention, and vice versa.

이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기계로부터 다양한 수정 및 변형을 꾀할 수 있다.In the above, the present invention has been described with specific matters such as specific components and limited embodiments and drawings, but these are provided to help a more general understanding of the present invention, and the present invention is not limited to the above embodiments. , those of ordinary skill in the art to which the present invention pertains can make various modifications and variations from such a machine.

따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위 뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.Therefore, the spirit of the present invention should not be limited to the above-described embodiments, and not only the claims described below, but also all modifications equivalently or equivalently to the claims described below belong to the scope of the spirit of the present invention. will do it

Claims (20)

에러 이벤트에 대한 가이드 정보를 제공하기 위한 방법에 있어서,
(a) 소정의 서비스에서 발생한 상기 에러 이벤트에 대하여, 상기 에러 이벤트에 대한 로그 데이터를 포함하는 에러 이벤트 데이터, 상기 서비스가 실행되는 환경 데이터 및 상기 서비스 자체에 대한 설정 데이터를 포함하는 제1 패킷이 서비스 단말에 의해 생성되면, 마스터 서버가 상기 제1 패킷을 상기 서비스 단말로부터 수신하는 단계;
(b) 상기 마스터 서버가, 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 에러 이벤트의 원인 데이터를 카테고리별로 분류하도록 하는 단계; 및
(c) 상기 마스터 서버가, (i) 제2 모델로 하여금, 상기 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터에 대한 가이드 데이터를 선택하도록 하고, (ii) 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 제2 패킷을 생성한 후 상기 제2 패킷을 개발자 단말에 송신하고, (iii) 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 카테고리 데이터에 대한 제1 응답 데이터를 포함하는 제3 패킷이 수신되면, 상기 카테고리 데이터 및 상기 제1 응답 데이터를 참조로 하여 상기 제1 모델을 보정하는 프로세스, 및 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷이 수신되면, 상기 가이드 데이터 및 상기 제2 응답 데이터를 참조로 하여 상기 제2 모델을 보정하는 프로세스 중 적어도 일부를 수행하는 단계;
를 포함하는 것을 특징으로 하는 방법.A method for providing guide information for error events,
(a) With respect to the error event occurring in a predetermined service, a first packet including error event data including log data for the error event, environment data in which the service is executed, and setting data for the service itself when generated by the service terminal, the master server receiving the first packet from the service terminal;
(b) causing, by the master server, a first model to classify cause data of the error event included in the first packet into categories; and
(c) the master server, (i) causes the second model to select guide data for category data corresponding to the cause data of the error event, (ii) the cause data, the category data, and the guide After generating a second packet including data, the second packet is transmitted to the developer terminal, and (iii) a third including first response data to the category data included in the second packet from the developer terminal When a packet is received, a process of calibrating the first model with reference to the category data and the first response data, and second response data to the guide data included in the second packet from the developer terminal performing at least a part of a process of correcting the second model with reference to the guide data and the second response data when the third packet is received;
A method comprising a. 제1항에 있어서,
상기 (b) 단계에서,
상기 마스터 서버는, 상기 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 원인 데이터의 위험도 데이터를 추가적으로 산출하도록 하는 것을 특징으로 하고,
상기 (c) 단계에서,
상기 위험도 데이터가 기설정된 위험 임계치 이상으로 판단되면, 상기 마스터 서버가, 상기 원인 데이터, 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 위험도 데이터에 대응되는 제1 우선순위정보를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 방법.According to claim 1,
In step (b),
The master server is characterized in that the first model additionally calculates risk data of the cause data included in the first packet,
In step (c),
When it is determined that the risk data is greater than or equal to a preset risk threshold, the master server generates the second packet including first priority information corresponding to the cause data, the category data, the guide data, and the risk data. After the method, characterized in that for transmitting the second packet to the developer terminal. 제2항에 있어서,
상기 (c) 단계에서,
상기 위험도 데이터가 기설정된 위험 임계치 미만으로 판단되면, 상기 마스터 서버가, 상기 위험도 데이터에 대응되는 제2 우선순위정보 - 상기 제2 우선순위정보는 상기 제1 우선순위정보보다 우선순위가 낮음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하되,
기설정된 시간 구간 동안 상기 에러 이벤트의 발생 횟수가 소정의 발생 임계치 이상인 것으로 감지되면, 상기 마스터 서버가, 상기 위험도 데이터에 대응되는 제3 우선순위정보 - 상기 제3 우선순위정보는 상기 제2 우선순위정보보다 우선순위가 높음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 방법.3. The method of claim 2,
In step (c),
When it is determined that the risk data is less than a preset risk threshold, the master server, second priority information corresponding to the risk data - The second priority information has a lower priority than the first priority information -, After generating the second packet including the cause data, the category data and the guide data, the second packet is transmitted to the developer terminal,
When it is detected that the number of occurrences of the error event is greater than or equal to a predetermined occurrence threshold during a preset time period, the master server, the third priority information corresponding to the risk data - the third priority information is the second priority Higher priority than information - Method, characterized in that for transmitting the second packet to the developer terminal after generating the second packet including the cause data, the category data and the guide data. 제1항에 있어서,
상기 제3 패킷은, 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 추가적으로 포함하고,
상기 (c) 단계에서,
상기 마스터 서버는, 상기 제3 패킷에 포함된 상기 타겟 데이터를 참조로 하여, 상기 제3 패킷을 특정 모델 - 상기 특정 모델은, 상기 제1 모델 및 상기 제2 모델 중 상기 타겟 데이터에 대응되는 적어도 하나의 모델임 - 에 입력하며, 특정 응답 데이터 - 상기 특정 응답 데이터는 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 상기 타겟 데이터에 대응되는 적어도 하나의 데이터임 - 를 사용하여 상기 특정 모델을 보정하는 것을 특징으로 하는 방법.According to claim 1,
The third packet further includes target data corresponding to at least one of the first model and the second model,
In step (c),
The master server, with reference to the target data included in the third packet, selects the third packet as a specific model. The specific model is at least one corresponding to the target data among the first model and the second model. One model is input to , and the specific response data is at least one data corresponding to the target data among the first response data and the second response data. The specific model is corrected using specific response data. A method characterized in that 제1항에 있어서,
상기 (b) 단계에서, 상기 제1 패킷에 포함된 상기 원인 데이터가 상기 제1 모델에서 미분류된 경우, 상기 마스터 서버는, 상기 (c) 단계에서, (i) 상기 제1 패킷을 상기 개발자 단말로 송신하고, (ii) 상기 개발자 단말로부터 상기 제1 패킷에 포함된 상기 원인 데이터에 대응되는 상기 카테고리 데이터에 대한 제1 응답 데이터 및 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷을 수신하고, (iii) 상기 원인 데이터 및 상기 카테고리 데이터를 참조로 하여 상기 제1 모델을 보정하고, 상기 카테고리 데이터 및 상기 가이드 데이터를 참조로 하여 상기 제2 모델을 보정하는 것을 특징으로 하는 방법.According to claim 1,
In step (b), when the cause data included in the first packet is unclassified in the first model, the master server, in step (c), (i) transmits the first packet to the developer terminal and (ii) the third packet including the first response data to the category data and the second response data to the guide data corresponding to the cause data included in the first packet from the developer terminal. and (iii) correcting the first model with reference to the cause data and the category data, and correcting the second model with reference to the category data and the guide data. 제1항에 있어서,
상기 (a) 단계에서,
상기 제1 패킷은, (i) 상기 제1 패킷을 확인하고 재전송을 방지하기 위한 제1 패킷 시퀀스, (ii) 상기 제1 패킷의 생성 시간을 나타내는 제1 패킷 타임스탬프 및 (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대한 무결성을 검증하는 제1 해시 기반 코드를 더 포함하는 것을 특징으로 하는 방법.According to claim 1,
In step (a),
The first packet includes: (i) a first packet sequence for identifying the first packet and preventing retransmission, (ii) a first packet timestamp indicating the creation time of the first packet, and (iii) the error event The method of claim 1, further comprising: a first hash-based code for verifying integrity of data, the environment data, and the configuration data. 제1항에 있어서,
상기 (a) 단계에서,
상기 에러 이벤트 데이터는 상기 에러 이벤트에 관한 메시지, 상기 에러 이벤트가 발생된 스택, 상기 에러 이벤트가 발생된 모듈, 상기 에러 이벤트의 발생 시점의 매개변수 중 적어도 하나 이상을 포함하는 것을 특징으로 하고,
상기 환경 데이터는 상기 서비스가 실행되는 네트워크 상태 정보, CPU 상태 정보, Memory 상태 정보, Disk 상태 정보, 상기 서비스 단말에 설정된 환경 변수, 개발자가 추가적으로 설정해둔 값 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 방법.According to claim 1,
In step (a),
The error event data is characterized in that it includes at least one or more of a message related to the error event, a stack in which the error event is generated, a module in which the error event is generated, and a parameter at the time of occurrence of the error event,
The environment data is characterized in that it comprises at least one or more of network status information in which the service is executed, CPU status information, Memory status information, Disk status information, environment variables set in the service terminal, and values additionally set by the developer. Way. 제1항에 있어서,
상기 (c) 단계에서,
상기 제2 패킷은, (i) 상기 제2 패킷을 확인하고 재전송을 방지하기 위한 제2 패킷 시퀀스, (ii) 상기 제2 패킷의 생성 시간을 나타내는 제2 패킷 타임스탬프, (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대응되는 로우 데이터, (iv) 상기 원인 데이터에 대응되는 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 로우 데이터에 대한 무결성을 검증하는 제2 해시 기반 코드, (v) 상기 원인 데이터에 대응되는 상기 카테고리 데이터의 크기 및 (vi) 상기 가이드 데이터의 크기를 더 포함하는 것을 특징으로 하는 방법.According to claim 1,
In step (c),
The second packet includes (i) a second sequence of packets to confirm the second packet and prevent retransmission, (ii) a second packet timestamp indicating a generation time of the second packet, (iii) the error event data, raw data corresponding to the environment data and the setting data, (iv) a second hash-based code that verifies the integrity of the category data corresponding to the cause data, the guide data, and the raw data, (v) A size of the category data corresponding to the cause data and (vi) a size of the guide data. 제1항에 있어서,
상기 (c) 단계에서,
상기 제3 패킷은, (i) 상기 제3 패킷을 확인하고 재전송을 방지하기 위한 제3패킷 시퀀스, (ii) 상기 제3패킷의 생성 시간을 나타내는 제3패킷 타임스탬프, (iii) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 무결성을 검증하는 제3 해시 기반 코드, (iv) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 크기 및 (v) 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 더 포함하는 것을 특징으로 하는 방법.According to claim 1,
In step (c),
The third packet includes (i) a third packet sequence for confirming the third packet and preventing retransmission, (ii) a third packet timestamp indicating a generation time of the third packet, (iii) the first A third hash-based code that verifies the integrity of at least one of the response data and the second response data, (iv) a size of at least one of the first response data and the second response data, and (v) the The method of claim 1, further comprising target data corresponding to at least one of the first model and the second model. 제1항에 있어서,
상기 (c) 단계에서,
상기 제2 패킷을 상기 개발자 단말에 송신한 시각으로부터 임계 시간 이상으로 상기 제2 패킷에 대한 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 일부가 수신되지 않을 경우, 상기 마스터 서버는, 상기 개발자 단말에 상기 제2 패킷을 기설정된 시간 간격으로 반복하여 재송신하고, 상기 반복하여 재송신하는 횟수가 기설정된 제2 횟수를 만족하면, 상기 제2 패킷에 대응되는 상기 제1 응답 데이터 및 상기 제2 응답 데이터를 없음으로 판단하는 것을 특징으로 하는 방법.According to claim 1,
In step (c),
When at least some of the first response data and the second response data for the second packet are not received for more than a threshold time from the time when the second packet is transmitted to the developer terminal, the master server, the developer The terminal repeatedly retransmits the second packet at a preset time interval, and when the number of repeated retransmissions satisfies a preset second number of times, the first response data corresponding to the second packet and the second response A method, characterized in that the data is determined to be absent. 에러 이벤트에 대한 가이드 정보를 제공하기 위한 마스터 서버에 있어서,
인스트럭션들을 저장하는 하나 이상의 메모리; 및
상기 인스트럭션들을 수행하도록 설정된 하나 이상의 프로세서를 포함하되,
상기 프로세서가, (I) 소정의 서비스에서 발생한 상기 에러 이벤트에 대하여, 상기 에러 이벤트에 대한 로그 데이터를 포함하는 에러 이벤트 데이터, 상기 서비스가 실행되는 환경 데이터 및 상기 서비스 자체에 대한 설정 데이터를 포함하는 제1 패킷이 서비스 단말에 의해 생성되면, 상기 제1 패킷을 상기 서비스 단말로부터 수신하는 프로세스; (II) 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 에러 이벤트의 원인 데이터를 카테고리별로 분류하도록 하는 프로세스; 및 (III) (i) 제2 모델로 하여금, 상기 에러 이벤트의 원인 데이터에 대응되는 카테고리 데이터에 대한 가이드 데이터를 선택하도록 하고, (ii) 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 제2 패킷을 생성한 후 상기 제2 패킷을 개발자 단말에 송신하고, (iii) 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 카테고리 데이터에 대한 제1 응답 데이터를 포함하는 제3 패킷이 수신되면, 상기 카테고리 데이터 및 상기 제1 응답 데이터를 참조로 하여 상기 제1 모델을 보정하는 프로세스, 및 상기 개발자 단말로부터 상기 제2 패킷에 포함된 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷이 수신되면, 상기 가이드 데이터 및 상기 제2 응답 데이터를 참조로 하여 상기 제2 모델을 보정하는 프로세스 중 적어도 일부를 수행하는 프로세스를 수행하는 것을 특징으로 하는 마스터 서버.In the master server for providing guide information for error events,
one or more memories storing instructions; and
one or more processors configured to perform the instructions,
The processor includes (I) error event data including log data for the error event, environment data in which the service is executed, and setting data for the service itself with respect to the error event occurring in a predetermined service a process of receiving the first packet from the service terminal when the first packet is generated by the service terminal; (II) a process of causing a first model to classify cause data of the error event included in the first packet into categories; and (III) (i) causing the second model to select guide data for category data corresponding to the cause data of the error event, and (ii) including the cause data, the category data, and the guide data. After generating the second packet, the second packet is transmitted to the developer terminal, and (iii) when a third packet including the first response data for the category data included in the second packet is received from the developer terminal , a process of calibrating the first model with reference to the category data and the first response data, and the third including second response data to the guide data included in the second packet from the developer terminal When a packet is received, the master server, characterized in that performing a process of performing at least a part of the process of correcting the second model with reference to the guide data and the second response data. 제11항에 있어서,
상기 (II) 프로세스에서,
상기 프로세서는, 상기 제1 모델로 하여금, 상기 제1 패킷에 포함된 상기 원인 데이터의 위험도 데이터를 추가적으로 산출하도록 하는 것을 특징으로 하고,
상기 (III) 프로세스에서,
상기 위험도 데이터가 기설정된 위험 임계치 이상으로 판단되면, 상기 프로세서가, 상기 원인 데이터, 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 위험도 데이터에 대응되는 제1 우선순위정보를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 마스터 서버.12. The method of claim 11,
In the process (II) above,
The processor is characterized in that the first model additionally calculates risk data of the cause data included in the first packet,
In the process (III) above,
When it is determined that the risk data is greater than or equal to a preset risk threshold, the processor generates the second packet including first priority information corresponding to the cause data, the category data, the guide data, and the risk data. Then the master server, characterized in that for transmitting the second packet to the developer terminal. 제12항에 있어서,
상기 (III) 프로세스에서,
상기 위험도 데이터가 기설정된 위험 임계치 미만으로 판단되면, 상기 프로세서가, 상기 위험도 데이터에 대응되는 제2 우선순위정보 - 상기 제2 우선순위정보는 상기 제1 우선순위정보보다 우선순위가 낮음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하되,
기설정된 시간 구간 동안 상기 에러 이벤트의 발생 횟수가 소정의 발생 임계치 이상인 것으로 감지되면, 상기 프로세서가, 상기 위험도 데이터에 대응되는 제3 우선순위정보 - 상기 제3 우선순위정보는 상기 제2 우선순위정보보다 우선순위가 높음 -, 상기 원인 데이터, 상기 카테고리 데이터 및 상기 가이드 데이터를 포함하는 상기 제2 패킷을 생성한 후 상기 제2 패킷을 상기 개발자 단말에 송신하는 것을 특징으로 하는 마스터 서버.13. The method of claim 12,
In the process (III) above,
If it is determined that the risk data is less than a preset risk threshold, the processor, second priority information corresponding to the risk data - The second priority information has a lower priority than the first priority information -, the After generating the second packet including the cause data, the category data and the guide data, the second packet is transmitted to the developer terminal,
When it is detected that the number of occurrences of the error event during a preset time period is equal to or greater than a predetermined occurrence threshold, the processor, the third priority information corresponding to the risk data - the third priority information is the second priority information Higher priority - Master server, characterized in that for transmitting the second packet to the developer terminal after generating the second packet including the cause data, the category data and the guide data. 제11항에 있어서,
상기 제3 패킷은, 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 추가적으로 포함하고,
상기 (III) 프로세스에서,
상기 프로세서는, 상기 제3 패킷에 포함된 상기 타겟 데이터를 참조로 하여, 상기 제3 패킷을 특정 모델 - 상기 특정 모델은, 상기 제1 모델 및 상기 제2 모델 중 상기 타겟 데이터에 대응되는 적어도 하나의 모델임 - 에 입력하며, 특정 응답 데이터 - 상기 특정 응답 데이터는 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 상기 타겟 데이터에 대응되는 적어도 하나의 데이터임 - 를 사용하여 상기 특정 모델을 보정하는 것을 특징으로 하는 마스터 서버.12. The method of claim 11,
The third packet further includes target data corresponding to at least one of the first model and the second model,
In the process (III) above,
The processor, with reference to the target data included in the third packet, sets the third packet as a specific model. The specific model is at least one of the first model and the second model corresponding to the target data. is a model of - is input to, and corrects the specific model using specific response data, wherein the specific response data is at least one data corresponding to the target data among the first response data and the second response data Master server, characterized in that. 제11항에 있어서,
상기 (II) 프로세스에서, 상기 제1 패킷에 포함된 상기 원인 데이터가 상기 제1 모델에서 미분류된 경우, 상기 프로세서는, 상기 (III) 프로세스에서, (i) 상기 제1 패킷을 상기 개발자 단말로 송신하고, (ii) 상기 개발자 단말로부터 상기 제1 패킷에 포함된 상기 원인 데이터에 대응되는 상기 카테고리 데이터에 대한 제1 응답 데이터 및 상기 가이드 데이터에 대한 제2 응답 데이터를 포함하는 상기 제3 패킷을 수신하고, (iii) 상기 원인 데이터 및 상기 카테고리 데이터를 참조로 하여 상기 제1 모델을 보정하고, 상기 카테고리 데이터 및 상기 가이드 데이터를 참조로 하여 상기 제2 모델을 보정하는 것을 특징으로 하는 마스터 서버.12. The method of claim 11,
In the (II) process, when the cause data included in the first packet is unclassified in the first model, the processor, in the (III) process, (i) transmits the first packet to the developer terminal and (ii) the third packet including the first response data to the category data and the second response data to the guide data corresponding to the cause data included in the first packet from the developer terminal receiving, (iii) correcting the first model with reference to the cause data and the category data, and correcting the second model with reference to the category data and the guide data. 제11항에 있어서,
상기 (I) 프로세스에서,
상기 제1 패킷은, (i) 상기 제1 패킷을 확인하고 재전송을 방지하기 위한 제1 패킷 시퀀스, (ii) 상기 제1 패킷의 생성 시간을 나타내는 제1 패킷 타임스탬프 및 (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대한 무결성을 검증하는 제1 해시 기반 코드를 더 수행하는 것을 특징으로 하는 마스터 서버.12. The method of claim 11,
In the process (I) above,
The first packet includes: (i) a first packet sequence for identifying the first packet and preventing retransmission, (ii) a first packet timestamp indicating the creation time of the first packet, and (iii) the error event The master server, characterized in that it further performs a first hash-based code for verifying the integrity of the data, the environment data and the setting data. 제11항에 있어서,
상기 (I) 프로세스에서,
상기 에러 이벤트 데이터는 상기 에러 이벤트에 관한 메시지, 상기 에러 이벤트가 발생된 스택, 상기 에러 이벤트가 발생된 모듈, 상기 에러 이벤트의 발생 시점의 매개변수 중 적어도 하나 이상을 포함하는 것을 특징으로 하고,
상기 환경 데이터는 상기 서비스가 실행되는 네트워크 상태 정보, CPU 상태 정보, Memory 상태 정보, Disk 상태 정보, 상기 서비스 단말에 설정된 환경 변수, 개발자가 추가적으로 설정해둔 값 중 적어도 하나 이상을 수행하는 것을 특징으로 하는 마스터 서버.12. The method of claim 11,
In the process (I) above,
The error event data is characterized in that it includes at least one or more of a message related to the error event, a stack in which the error event is generated, a module in which the error event is generated, and a parameter at the time of occurrence of the error event,
The environment data is characterized in that performing at least one or more of network status information, CPU status information, Memory status information, Disk status information, environment variables set in the service terminal, and values additionally set by a developer in which the service is executed master server. 제11항에 있어서,
상기 (III) 프로세스에서,
상기 제2 패킷은, (i) 상기 제2 패킷을 확인하고 재전송을 방지하기 위한 제2 패킷 시퀀스, (ii) 상기 제2 패킷의 생성 시간을 나타내는 제2 패킷 타임스탬프, (iii) 상기 에러 이벤트 데이터, 상기 환경 데이터 및 상기 설정 데이터에 대응되는 로우 데이터, (iv) 상기 원인 데이터에 대응되는 상기 카테고리 데이터, 상기 가이드 데이터 및 상기 로우 데이터에 대한 무결성을 검증하는 제2 해시 기반 코드, (v) 상기 원인 데이터에 대응되는 상기 카테고리 데이터의 크기 및 (vi) 상기 가이드 데이터의 크기를 더 수행하는 것을 특징으로 하는 마스터 서버.12. The method of claim 11,
In the process (III) above,
The second packet includes (i) a second sequence of packets to confirm the second packet and prevent retransmission, (ii) a second packet timestamp indicating a generation time of the second packet, (iii) the error event data, raw data corresponding to the environment data and the setting data, (iv) a second hash-based code that verifies the integrity of the category data corresponding to the cause data, the guide data, and the raw data, (v) The master server, characterized in that it further performs the size of the category data corresponding to the cause data and (vi) the size of the guide data. 제11항에 있어서,
상기 (III) 프로세스에서,
상기 제3 패킷은, (i) 상기 제3 패킷을 확인하고 재전송을 방지하기 위한 제3패킷 시퀀스, (ii) 상기 제3패킷의 생성 시간을 나타내는 제3패킷 타임스탬프, (iii) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 무결성을 검증하는 제3 해시 기반 코드, (iv) 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 하나 이상에 대한 크기 및 (v) 상기 제1 모델 및 상기 제2 모델 중 적어도 하나 이상에 대응되는 타겟 데이터를 더 수행하는 것을 특징으로 하는 마스터 서버.12. The method of claim 11,
In the process (III) above,
The third packet includes (i) a third packet sequence for confirming the third packet and preventing retransmission, (ii) a third packet timestamp indicating a generation time of the third packet, (iii) the first A third hash-based code that verifies the integrity of at least one of the response data and the second response data, (iv) a size of at least one of the first response data and the second response data, and (v) the The master server, characterized in that it further performs target data corresponding to at least one of the first model and the second model. 제11항에 있어서,
상기 (III) 프로세스에서,
상기 제2 패킷을 상기 개발자 단말에 송신한 시각으로부터 임계 시간 이상으로 상기 제2 패킷에 대한 상기 제1 응답 데이터 및 상기 제2 응답 데이터 중 적어도 일부가 수신되지 않을 경우, 상기 프로세서는, 상기 개발자 단말에 상기 제2 패킷을 기설정된 시간 간격으로 반복하여 재송신하고, 상기 반복하여 재송신하는 횟수가 기설정된 제2 횟수를 만족하면, 상기 제2 패킷에 대응되는 상기 제1 응답 데이터 및 상기 제2 응답 데이터를 없음으로 판단하는 것을 특징으로 하는 마스터 서버.
12. The method of claim 11,
In the process (III) above,
When at least some of the first response data and the second response data for the second packet are not received for more than a threshold time from the time when the second packet is transmitted to the developer terminal, the processor, the developer terminal Repeatedly retransmits the second packet at a preset time interval, and when the number of repeated retransmissions satisfies a preset second number of times, the first response data and the second response data corresponding to the second packet A master server, characterized in that it is determined as none.
KR1020220102977A 2022-08-17 2022-08-17 Method for providing guide information on error event and server using the same KR102460638B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220102977A KR102460638B1 (en) 2022-08-17 2022-08-17 Method for providing guide information on error event and server using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220102977A KR102460638B1 (en) 2022-08-17 2022-08-17 Method for providing guide information on error event and server using the same

Publications (1)

Publication Number Publication Date
KR102460638B1 true KR102460638B1 (en) 2022-10-28

Family

ID=83835309

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220102977A KR102460638B1 (en) 2022-08-17 2022-08-17 Method for providing guide information on error event and server using the same

Country Status (1)

Country Link
KR (1) KR102460638B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009276929A (en) * 2008-05-13 2009-11-26 Hitachi Electronics Service Co Ltd Automatic fault handling system
KR20130017352A (en) * 2011-08-10 2013-02-20 엘지전자 주식회사 Diagnostic system and method for home appliance
KR20180037342A (en) * 2016-10-04 2018-04-12 주식회사 리나소프트 Application software error monitoring, statistics management service and solution method.
KR20190035433A (en) * 2017-09-25 2019-04-03 다산 죤 솔루션즈, 아이엔씨. System and method for remote maintenance

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009276929A (en) * 2008-05-13 2009-11-26 Hitachi Electronics Service Co Ltd Automatic fault handling system
KR20130017352A (en) * 2011-08-10 2013-02-20 엘지전자 주식회사 Diagnostic system and method for home appliance
KR20180037342A (en) * 2016-10-04 2018-04-12 주식회사 리나소프트 Application software error monitoring, statistics management service and solution method.
KR20190035433A (en) * 2017-09-25 2019-04-03 다산 죤 솔루션즈, 아이엔씨. System and method for remote maintenance

Similar Documents

Publication Publication Date Title
US8015551B2 (en) Software operation modeling device, software operation monitoring device, software operation modeling method, and software operation monitoring method
CN113473511A (en) Network system troubleshooting via machine learning models
JP5198154B2 (en) Fault monitoring system, device, monitoring apparatus, and fault monitoring method
US20210357280A1 (en) Systems and methods for application operational monitoring
CN112954031B (en) Equipment state notification method based on cloud mobile phone
US20200250475A1 (en) Anomaly factor estimation device, anomaly factor estimation method, and storage medium
CN113934621A (en) Fuzzy test method, system, electronic device and medium
KR102460638B1 (en) Method for providing guide information on error event and server using the same
CN107872688B (en) Method and system for counting authorization data of television function items
CN114116170A (en) Timed task execution method and device, computer equipment and storage medium
CN114356859A (en) Data import method and device, equipment and computer readable storage medium
CN110598466B (en) Offline field checking method, device and equipment and computer readable storage medium
CN113495750B (en) Upgrade detection method and device for equipment and server
CN114063606B (en) PLC protocol fuzzy test method and device, electronic equipment and storage medium
CN112543186B (en) Network behavior detection method and device, storage medium and electronic equipment
CN114579809A (en) Event analysis method and device, electronic equipment and storage medium
CN114615036A (en) Abnormal behavior detection method, device, equipment and storage medium
CN105608006B (en) A kind of program error detection method and system based on probabilistic model
CN108880994B (en) Method and device for retransmitting mails
CN113676365A (en) Access request processing method and device and electronic equipment
CN111147473A (en) Network message forwarding method, device and system
Liu et al. Data sniffing-monitoring of machine learning for online adaptive systems
US20220374780A1 (en) Training device, training method, and training program
CN112948404B (en) Multi-source monitoring data classification modeling and transferring method and system
CN112148514B (en) Watchdog resetting method and device, storage medium and electronic equipment

Legal Events

Date Code Title Description
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant