KR101956602B1 - 로그 데이터 수집 장치 - Google Patents

로그 데이터 수집 장치 Download PDF

Info

Publication number
KR101956602B1
KR101956602B1 KR1020170074959A KR20170074959A KR101956602B1 KR 101956602 B1 KR101956602 B1 KR 101956602B1 KR 1020170074959 A KR1020170074959 A KR 1020170074959A KR 20170074959 A KR20170074959 A KR 20170074959A KR 101956602 B1 KR101956602 B1 KR 101956602B1
Authority
KR
South Korea
Prior art keywords
log data
collecting
unit
setting unit
facility
Prior art date
Application number
KR1020170074959A
Other languages
English (en)
Other versions
KR20180136250A (ko
Inventor
정흥균
Original Assignee
(주)클라우드네트웍스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)클라우드네트웍스 filed Critical (주)클라우드네트웍스
Priority to KR1020170074959A priority Critical patent/KR101956602B1/ko
Publication of KR20180136250A publication Critical patent/KR20180136250A/ko
Application granted granted Critical
Publication of KR101956602B1 publication Critical patent/KR101956602B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G05B19/4183—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by data acquisition, e.g. workpiece identification
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B23/00—Testing or monitoring of control systems or parts thereof
    • G05B23/02—Electric testing or monitoring
    • G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
    • G05B23/0218—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults
    • G05B23/0221—Preprocessing measurements, e.g. data collection rate adjustment; Standardization of measurements; Time series or signal analysis, e.g. frequency analysis or wavelets; Trustworthiness of measurements; Indexes therefor; Measurements using easily measured parameters to estimate parameters difficult to measure; Virtual sensor creation; De-noising; Sensor fusion; Unconventional preprocessing inherently present in specific fault detection methods like PCA-based methods
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B23/00—Testing or monitoring of control systems or parts thereof
    • G05B23/02—Electric testing or monitoring
    • G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
    • G05B23/0259—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterized by the response to fault detection
    • G05B23/0264—Control of logging system, e.g. decision on which data to store; time-stamping measurements
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B90/00—Enabling technologies or technologies with a potential or indirect contribution to GHG emissions mitigation
    • Y02B90/10—Applications of fuel cells in buildings
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • General Engineering & Computer Science (AREA)
  • Manufacturing & Machinery (AREA)
  • Quality & Reliability (AREA)
  • Debugging And Monitoring (AREA)

Abstract

로그 데이터 수집 장치가 개시된다.
이 장치는 네트워크를 통해 연결되는 복수의 설비에 각각 저장되는 로그 데이터를 수집하는 장치이다. 이 장치의 설정부는 상기 복수의 설비에 각각 저장되는 로그 데이터를 수집하는 데 사용되는 파라미터들을 설정한다. 수집부는 상기 설정부에 의해 설정되는 파라미터들에 따라서 CIFS(Common Internet File System)) 기반의 삼바(Samba) 프로토콜을 사용하여 상기 복수의 설비별로 각각 저장되는 로그 데이터를 수집한다.

Description

로그 데이터 수집 장치{APPARATUS FOR COLLECTING LOG DATA}
본 발명은 로그 데이터 수집 장치에 관한 것이다.
로그(Log), 또는 로그 데이터는 정보화 장비 및 네트워크 운영 과정에서 발생하는 모든 내용들이 발생 시간 등과 함께 기록된 자료를 말한다.
최근에는 정보 통신 기기들은 물론 센서 기술들의 발전으로 인해 빅 데이터와 같은 다량의 로그가 발생하고 있어서, 이러한 다량의 로그 데이터를 효율적으로 수집하는 기술이 요구되고 있다.
한편, 생산 공정 설비, 제조 공정 설비 등 다양한 공정 설비가 사용되는 경우, 이러한 공정 설비에서 발생되는 로그 데이터도 다양한 형태의 로그 데이터로 저장될 것이다.
이 경우, 설비 종류에 따라서 표준화된 로그 데이터로 가공하여 수집하기 위해 각 설비마다 로그 데이터를 가공하기 위한 작업이 수행되어야 하므로, 설비의 기본 작업외에 로그 데이터를 가공하기 위한 추가 작업이 요구되고 있어, 다량의 로그 데이터 발생으로 인해 해당 설비에서의 과부하 요인이 될 수 있다.
따라서, 공정 설비에서 발생되는 로그 데이터를 효율적으로 수집하기 위한 장치가 요구된다.
본 발명이 이루고자 하는 기술적 과제는 로그 데이터 수집으로 인한 복수의 설비에서의 과부하 발생은 물론 로그 데이터 수집 성능이 개선되는 로그 데이터 수집 장치를 제공한다.
본 발명의 한 특징에 따른 로그 데이터 수집 장치는,
네트워크를 통해 연결되는 복수의 설비에 각각 저장되는 로그 데이터를 수집하는 장치로서, 상기 복수의 설비에 각각 저장되는 로그 데이터를 수집하는 데 사용되는 파라미터들을 설정하는 설정부; 상기 설정부에 의해 설정되는 파라미터들에 따라서 CIFS(Common Internet File System)) 기반의 삼바(Samba) 프로토콜을 사용하여 상기 복수의 설비별로 각각 저장되는 로그 데이터를 수집하는 수집부를 포함한다.
여기서, 상기 설정부는, 상기 네트워크를 통해 로그 데이터를 전송하는 대역폭을 설정하는 대역폭 설정부; 로그 데이터를 수집하는 간격을 설정하는 간격 설정부; 및 로그 데이터를 수집하는 방식을 설정하는 수집 방식 설정부를 포함한다.
또한, 사용자 인터페이스를 통해 상기 파라미터들을 설정하기 위한 화면을 표시하고, 상기 사용자 인터페이스를 통한 사용자 입력에 따라 상기 설정부가 상기 파라미터들을 설정한다.
또한, 상기 파라미터들은 상기 수집부가 로그 데이터를 수집하는 상기 네트워크의 트래픽 상태에 따라서 적응적으로 설정된다.
또한, 상기 수집부는, 상기 설비에 저장되는 로그 데이터의 증분 발생시 증분되는 로그 데이터를 수집하는 증분 수집부; 및 상기 설비에 저장되는 로그 데이터의 풀 스캔에 기반하여 로그 데이터의 변경이 있는 경우에 변경된 로그 데이터를 수집하는 복제 수집부를 포함하며, 상기 수집부는 상기 설정부의 수집 방식 설정부에 설정되어 있는 수집 방식에 따라서 상기 증분 수집부 또는 상기 복제 수집부를 선택하여 로그 데이터를 수집한다.
또한, 상기 증분 수집부는 상기 설비에 저장되는 로그 데이터에 대해 라인의 증분이 발생하는 경우에 증분된 라인의 로그 데이터를 수집한다.
또한, 상기 설정부는 수집되는 로그 데이터의 저장 위치 정보가 저장되는 저장 위치 설정부를 더 포함하고, 상기 수집부는 상기 설비의 장애 또는 상기 네트워크의 장애로 인해 로그 데이터의 수집이 중단되는 경우 수집된 로그 데이터의 최종 저장 위치를 상기 저장 위치 설정부에 저장하고, 상기 수집부는 장애 복구 후에 상기 저장 위치 설정부에 저장된 최종 저장 위치를 사용하여 로그 데이터의 수집을 재개한다.
또한, 상기 설정부는 상기 설비의 운영 상태의 변경 사항 추적을 위한 구성 스냅샷(Configuration Snapshot)을 추가로 저장한다.
또한, 상기 복수의 설비로부터 수집되는 로그 데이터 및 로그 수집 이력 데이터를 저장하는 저장부를 더 포함하고, 상기 설정부는 상기 저장부에 저장되는 이력 데이터를 삭제하는 주기를 추가로 설정한다.
본 발명에 따르면, 로그 데이터를 수집하는 데 사용되는 대역폭, 간격, 수집 방식 등의 파라미터를 조절할 수 있다.
또한, CIFS(Common Internet File System) 기반의 삼바 프로그램을 사용하기 때문에 설비에 별도의 에이전트(Agent)를 설치하지 않고도 설비에 저장된 로그 데이터를 수집할 수 있으므로, 로그 데이터 수집으로 인한 설비에서의 과부하 발생을 방지할 수 있다.
또한, 각종 장애로 인해 로그 데이터 수집이 중단된 후 장애 복구 후에 최종 수집 시점에서 로그 데이터 수집을 재개할 수 있으므로, 로그 데이터의 자동 동기화가 가능하다.
또한, 설비별로 로그 데이터를 수집하는 전송 트래픽의 상태에 따라 로그 데이터를 수집하는 데 사용되는 파라미터를 적응적으로 설정함으로써 로그 데이터 수집 성능이 개선될 수 있다.
도 1은 본 발명의 실시예에 따른 로그 데이터 수집 장치가 사용되는 예를 개략적으로 도시한 도면이다.
도 2는 도 1에 도시된 로그 데이터 수집 장치의 구체적인 구성도이다.
도 3은 본 발명의 실시예에 따른 로그 데이터 수집 방식 중 하나인 증분 수집 방식을 개략적으로 도시한 도면이다.
도 4는 도 2에 도시된 설정부의 구체적인 구성도이다.
도 5는 도 2에 도시된 수집부의 구체적인 구성도이다.
도 6은 본 발명의 실시예에 따른 로그 데이터 수집 장치의 동작 흐름도이다.
아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 로그 데이터 수집 장치에 대해 설명한다.
도 1은 본 발명의 실시예에 따른 로그 데이터 수집 장치가 사용되는 예를 개략적으로 도시한 도면이다.
도 1을 참조하면, 본 발명의 실시예에 따른 로그 데이터 수집 장치(100)는 네트워크(200)를 통해 로그 데이터의 수집 대상인 복수의 설비(300)에 연결된다.
복수의 설비(300)는 설비(300)의 작동에 따라 생성되는 로그 데이터를 저장하는 스토리지(310)를 각각 보유한다. 이 때, 설비(300)의 종류에 따라서 스토리지(310)에 저장되는 로그 데이터의 종류나 형태도 상이할 수 있다.
로그 데이터 수집 장치(100)는 네트워크(200)를 통해 설비(300)로부터 로그 데이터를 수집할 때 삼바(Samba) 프로그램 또는 삼바 프로토콜을 사용한다. 여기서, 삼바 프로그램은 인트라넷이나 인터넷에서 서버의 파일 및 프린터를 사용할 수 있는 프로그램으로서, 리눅스, 유닉스, OpenVMS, OS/2 등 다양한 운영 체계에서 설치되는 SMB(Server Message Block) 및 CIFS(Common Internet File System) 클라이언트/서버 프로토콜 기반의 프로그램이다.
즉, 로그 데이터 수집 장치(100)는 삼바 프로그램을 사용하여 설비(300)의 스토리지(310)에 직접 액세스하여 스토리지(310)에 저장되어 있는 로그 데이터를 실시간으로 수집할 수 있다. 이 때, 로그 데이터 수집 장치(100)는 삼바 프로그램을 사용하기 때문에 설비(300)에 별도의 에이전트(Agent)를 설치하지 않고도 스토리지(310)에 저장된 로그 데이터를 수집할 수 있다. 따라서, 로그 데이터 수집으로 인한 설비(300)에서의 과부하 발생을 방지할 수 있게 된다.
도 2는 도 1에 도시된 로그 데이터 수집 장치(100)의 구체적인 구성도이다.
도 2에 도시된 바와 같이, 로그 데이터 수집 장치(100)는 사용자 인터페이스(User Interface)(110), 저장부(120), 설정부(130), 수집부(140) 및 수집 제어부(150)를 포함한다.
사용자 인터페이스(110)는 본 발명의 실시예에 따른 로그 데이터 수집을 위해 사용자에 대한 인터페이스를 제공한다. 이를 위해, 사용자 인터페이스(110)는 사용자의 입력을 받기 위한 입력 수단, 예를 들어 키보드, 마우스, 터치 디스플레이 등과, 사용자에게 정보를 표시하기 위한 디스플레이의 출력 수단 등을 포함한다. 전술한 입력 수단, 출력 수단 등에 대해서는 범용의 수단이 사용될 수 있다.
본 발명의 실시예에 따른 사용자 인터페이스(110)는 설비(300)의 스토리지(310)에 저장된 로그 데이터를 수집하기 위한 각종의 설정을 위해 사용자에게 설정 정보를 표시하고, 사용자로부터 설정 입력을 받는 데 사용될 수 있다.
저장부(120)는 로그 데이터 수집 장치(100)가 동작하는 데 필요한 데이터와 프로그램, 예를 들어 삼바 프로그램은 물론, 로그 데이터 수집 장치(100)에 의해 수집되는 로그 데이터를 저장한다. 이 때, 로그 데이터는 로그 데이터를 제공한 설비(300)에 대응되어 저장될 수 있다.
설정부(130)는 로그 데이터를 수집하는 데 필요한 파라미터를 설정한다. 여기서, 로그 데이터를 수집하는 데 필요한 파라미터에는 대역폭(bandwidth), 간격(interval), 수집 방식 등이 있다. 이 때, 수집 방식은 로그 데이터 수집 장치(100)가 설비(300)의 로그 데이터를 수집하는 방식에 대한 정보이다.
또한, 설정부(130)는 수집되는 로그 데이터의 저장 위치 정보를 더 저장한다. 여기서, 저장 위치 정보는 설비(300)의 장애, 또는 네트워크(200)의 장애 발생시 최종으로 로그 데이터를 수집한 위치, 즉 최종 수집 위치일 수 있다.
또한, 설정부(130)는 설비(300)의 운영 상태의 변경 사항 추적을 위한 구성 스냅샷(Configuration Snapshot)을 저장할 수 있다.
또한, 설정부(130)는 로그 데이터 수집 장치(100)의 저장부(120)에 저장되는 이력 데이터(History Data)를 삭제하는 주기를 설정할 수 있다. 이것은 로그 데이터 수집 장치(100)의 로컬 스토리지(local stroage)인 저장부(120)의 유지 관리 기능에 속한다.
수집부(140)는 네트워크(200)를 통해 설비(300) 내 스토리지(310)에 실시간으로 접속하여 스토리지(310)에 저장되어 있는 로그 데이터를 수집한다. 이러한 수집부(140)는 네트워크(200)를 통해 설비(300)에 접속하여 데이터 송수신이 가능한 네트워크 인터페이스 카드(Network Interface Card, NIC)를 포함한다.
수집부(140)는 적어도 두 가지 방식을 통해 로그 데이터를 수집할 수 있다.
첫 번째 방식은 증분 방식의 수집 방식이다.
도 3을 참조하면, 설비(300)의 스토리지(310)에 로그 데이터가 저장되어 있고, 저장된 로그 데이터의 마지막 저장 위치를 포인터(311)가 가리키고 있다. 이러한 상태에서, 수집부(140)는 설비(300)에 대한 영향을 최소화하기 위하여 삼바 프로그램을 사용하여 현재 운용 상태인 데이터 정보에 접근하여 로그 데이터의 저장 경로를 파악하고, 스토리지(311)의 포인터(311)의 값을 참조하여 증분 여부를 비교한 후에 증분되는 경우에 해당 로그 데이터를 수집한다. 도 3을 참조하면, 로그 데이터 "CLOUD"가 저장된 상태에서 그 후에 계속 로그 데이터가 저장되어 "CLOUDNETWORKS"가 된 상태에서 포인터(311) 기준으로 증분이 발생하였으므로 해당 로그 데이터를 수집한다. 특히, 본 발명의 실시예에서는 파일 증분이 라인 증분인 경우에 로그 데이터를 수집한다. 즉, 스토리지(311)에서 로그 데이터가 라인 기준으로 증분 발생시에 증분되어 저장된 라인의 로그 데이터를 수집하는 것이다.
두 번째 방식은 복제(Replication) 방식의 수집 방식이다.
이러한 복제 수집 방식은 설비(300)의 스토리지(310), 예를 들어 네트워크 드라이브(Network Drive)에 연결하여 대상 디렉토리와 하위 디렉토리를 풀 스캔(Full Scan)하여 변경된 데이터를 복제하여 수집하는 방식이다. 즉, 이전의 풀 스캔을 기준으로 수집 당시의 풀 스캔 파일의 데이터를 비교하여 변경된 경우에만 수집하는 방식이다.
이외에도 설비(300)의 스토리지(310)에 대한 로그 데이터 저장 형태에 따라서 다양한 수집 방식이 사용될 수 있다.
또한, 상기한 두 가지 방식, 즉 증분 수집 방식과 복제 수집 방식에 대해서도 설비(300)의 로그 데이터 저장 형태에 따라서 최적의 방식으로 선택 가능하며, 이 때의 선택은 사용자 인터페이스(110)를 통해 선택될 수 있다.
수집 제어부(150)는 로그 데이터 수집 장치(100)의 각 구성요소, 즉 사용자 인터페이스(110), 저장부(120), 설정부(130) 및 수집부(140) 간에 전달되는 신호를 처리한다.
도 4는 도 2에 도시된 설정부(130)의 구체적인 구성도이다.
도 4에 도시된 바와 같이, 설정부(130)는 대역폭 설정부(131), 간격 설정부(132), 수집 방식 설정부(133) 및 저장 위치 설정부(134)를 포함한다.
대역폭 설정부(131)는 수집부(140)가 네트워크(200)를 통해 설비(300)로부터 로그 데이터를 수집하기 위해 로그 데이터를 수신하는 대역폭을 설정한다. 이러한 대역폭은 설비(300)별로 다르게 설정될 수 있으며, 설비(300)에서 저장되는 로그 데이터의 양, 설비(300)의 운영 상태 등에 따라 다를 수 있으며, 이러한 대역폭은 사용자에 의해 설정될 수 있다.
선택적으로, 대역폭 설정부(131)에 설정되는 대역폭은 수집부(140)가 설비(300)로부터 로그 데이터를 수집하는 과정에서 판단되는 송수신 트래픽에 따라서 적응적으로 설정될 수 있다.
간격 설정부(132)는 설비(300)별로 로그 데이터를 수집하기 위한 간격, 즉 주기를 설정한다. 이러한 간격도 설비(300)별로 다르게 설정될 수 있으며, 설비(300)에서 저장되는 로그 데이터의 양, 설비(300)의 운영 상태 등에 따라 다를 수 있으며, 이러한 간격은 사용자에 의해 설정될 수 있다.
선택적으로, 간격 설정부(132)에 설정되는 간격도 또한 수집부(140)가 설비(300)로부터 로그 데이터를 수집하는 과정에서 판단되는 송수신 트래픽에 따라서 적응적으로 설정될 수 있다.
수집 방식 설정부(133)는 설비(300)별로 로그 데이터를 수집하는 데 사용되는 수집 방식을 설정한다. 이 때 수집 방식으로 전술한 바와 같이 증분 수집 방식과 복제 수집 방식이 설정될 수 있다. 이러한 수집 방식도 설비(300)별로 다르게 설정될 수 있으며, 설비(300)에서 저장되는 로그 데이터의 양, 설비(300)의 운영 상태 등에 따라 다를 수 있으며, 이러한 수집 방식은 사용자에 의해 설정될 수 있다.
저장 위치 설정부(134)는 설비(300)별로 수집된 로그 데이터의 수집 위치가 설정된다. 즉, 설비(300)의 스토리지(311)에서 수집된 로그 데이터의 최종 저장 위치 정보가 설정된다. 이러한 저장 위치 정보는 수집부(140)가 로그 데이터를 수집하면서 확인되어 설정될 수 있으며, 마찬가지로 설비(300)별로 대응되어 저장된다.
도 5는 도 2에 도시된 수집부(140)의 구체적인 구성도이다.
도 5에 도시된 바와 같이, 수집부(140)는 증분 수집부(141) 및 복제 수집부(142)를 포함한다.
증분 수집부(141)는 전술한 바와 같이 설비(300)의 스토리지(310)에 저장되어 있는 로그 데이터를 증분 발생시마다, 특히 라인 증분 발생시마다 증분된 라인 단위의 로그 데이터를 수집하는 방식이다.
복제 수집부(142)는 설비(300)의 스토리지(310)에 저장되어 있는 로그 데이터 파일의 풀 스캔에 기반하여 로그 데이터의 변경이 있는 경우에 해당 로그 데이터를 수집하는 방식이다.
수집부(140)는 설정부(130)의 수집 방식 설정부(133)에 설정되어 있는 설비(300)별 수집 방식에 따라서 증분 수집부(141)와 복제 수집부(142) 중 하나를 선택하여 로그 데이터를 수집한다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 로그 데이터 수집 장치의 동작에 대해 설명한다.
도 6은 본 발명의 실시예에 따른 로그 데이터 수집 장치의 동작 흐름도이다.
도 6을 참조하면, 본 발명의 실시예에 따른 로그 데이터 수집 장치의 동작은 수집 제어부(150)에 의해 제어된다.
먼저, 본 발명의 실시예에 따른 로그 데이터 수집을 위해, 저장부(120)에 저장되어 있는, 각종 파라미터를 설정하는 데 사용되는 애플리케이션(application)이 작동하여 사용자 인터페이스(110)를 통해 로그 데이터 수집을 위한 애플리케이션 화면을 표시한다(S100).
이후, 사용자는 애플리케이션 화면을 통해 본 발명의 실시예에 따른 로그 데이터 수집을 위해 사용되는 각종의 파라미터를 설정한다(S110). 이러한 파라미터로는 수집 대상 설비, 수집 대역폭, 수집 간격, 수집 방식 등이 있다. 즉, 사용자는 애플리케이션 화면을 통해 로그 데이터를 수집할 설비(300)와 로그 데이터 수집을 위한 대역폭, 간격, 수집 방식 등을 설정할 수 있다. 이렇게 설정되는 파라미터들은 설정부(130)에 저장된다. 이와 같이, 본 발명의 실시예에 따른 로그 데이터 수집 장치에서는 로그 데이터를 수집하는 데 사용되는 대역폭, 간격, 수집 방식 등의 파라미터를 조절할 수 있다.
이와 같이, 각종 파라미터가 설정되면, 로그 데이터 수집이 개시될 수 있는데, 이 때, 로그 데이터 수집이 처음 시작인지를 판단한다(S120). 즉, 이전에 설비(300), 네트워크(200) 등의 장애로 인해 로그 데이터 수집이 중간에 중단되는 경우에는 처음 시작이 아닌 것으로 판단될 수 있다. 이러한 판단은 사용자에 의해 수행되거나 또는 장애 발생시에 플래그(flag) 등을 사용하여 장애 발생 여부를 저장함으로써 저장된 플래그의 내용에 따라 수행될 수 있다.
만약 로그 데이터 수집이 처음 시작인 것으로 판단되는 경우, 수집 제어부(150)는 수집부(140)를 통해 설비(300)의 스토리지(310)에 저장되는 로그 데이터를 수집한다(S130). 이렇게 수집되는 로그 데이터는 내부의 저장부(120)에 저장된다. 이 때, 수집부(140)는 설정부(130)에서 설정된 파라미터들을 기준으로 로그 데이터를 수집하게 된다.
그러나, 만약 로그 데이터 수집이 처음 시작이 아니고 장애 발생 등으로 중간에 중단되었던 로그 데이터 수집을 재개하는 것으로 판단되는 경우, 설정부(130)에 저장되어 있는 최종 저장 위치 정보를 획득한 후(S140), 획득되는 최종 저장 위치 정보에 기초하여 설비(300)의 스토리지(310)에 저장되어 있는 로그 데이터를 수집한다(S150). 따라서, 본 발명의 실시예에서는 각종 장애로 인해 로그 데이터 수집이 중단된 후 장애 복구 후에 최종 수집 시점에서 로그 데이터 수집을 재개할 수 있으므로, 로그 데이터의 자동 동기화가 가능하다.
이와 같이, 설비(300)의 스토리지(310)에 저장되는 로그 데이터를 수집하는 중에 수집 종료가 발생하는지가 판단된다(S160). 이러한 수집 종료는 장애 등으로 인해 강제로 수집 종료가 발생하는 경우도 있고, 또한 사용자에 의해 수집 종료가 발생되는 경우가 있을 수 있다.
만약 수집 종료가 발생되지 않은 것으로 판단되면 전술한 로그 데이터 수집 과정(S130, S150)을 계속 수행하게 되지만, 만약 수집 종료가 발생된 것으로 판단되면 장애로 인한 수집 종료인지를 판단한다(S170).
장애로 인한 수집 종료인 것으로 판단되면, 로그 데이터를 최종으로 수집한 위치, 즉 수집되는 로그 데이터의 최종 저장 위치 정보를 확인하여 설정부(130)에 저장(S180)한 후 로그 데이터의 수집을 종료한다(S190).
상기 단계에서 장애로 인한 수집 종료가 아닌 것으로 판단되는 경우에는 그대로 로그 데이터의 수집을 종료한다(S190).
한편, 상기에서는 로그 데이터 수집시 사용되는 대역폭, 간격 등의 파라미터가 사용자에 의해서만 설정되는 것으로 설명하였으나, 본 발명은 여기에 한정되지 않고, 설비(300)의 스토리지(310)에 저장된 로그 데이터를 수집하는 과정에서 네트워크 트래픽 상태 등을 고려하여 적응적으로 대역폭, 간격 등의 파라미터를 조절할 수 있다. 예를 들어, 설비(300)로부터 네트워크(200)를 통해 로그 데이터를 수집하는 전송 트래픽이 미리 설정된 기준값보다 느려지는 경우, 즉 전송 트래픽이 악화되는 경우 수집 대역폭을 축소하고 수집 간격을 더 길게 설정하여 이에 기초하여 로그 데이터를 수집할 수 있다. 또한, 이와 반대로 전송 트래픽이 미리 설정된 기준값보다 빨라지는 경우, 즉 전송 트래픽이 양호해지는 경우 수집 대역폭을 확장하고 수집 간격을 더 짧게 설정하여 이에 기초하여 로그 데이터를 수집할 수 있다.
이와 같이, 본 발명의 다른 실시예에 따른 로그 데이터 수집 장치에 따르면, 설비(300)별로 로그 데이터를 수집하는 전송 트래픽의 상태에 따라 로그 데이터를 수집하는 데 사용되는 파라미터를 적응적으로 설정함으로써 로그 데이터 수집 성능이 개선될 수 있다.
이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
100 : 로그 데이터 수집 장치 110 : 사용자 인터페이스
120 : 저장부 130 : 설정부 140 : 수집부
131 : 대역폭 설정부 132 : 간격 설정부
133 : 수집 방식 설정부 134 : 저장 위치 설정부
141 : 증분 수집부 142 : 복제 수집부
200 : 네트워크 300 : 설비 310 : 스토리지

Claims (9)

  1. 네트워크를 통해 연결되는 복수의 설비에 각각 저장되는 로그 데이터를 수집하는 장치로서,
    상기 복수의 설비에 각각 저장되는 로그 데이터를 수집하는 데 사용되는 파라미터들을 설정하는 설정부;
    상기 설정부에 의해 설정되는 파라미터들에 따라서 CIFS(Comon Internet File System) 기반의 삼바(Samba) 프로토콜을 사용하여 상기 복수의 설비별로 각각 저장되는 로그 데이터를 수집하는 수집부를 포함하고,
    상기 설정부는,
    상기 네트워크를 통해 로그 데이터를 전송하는 대역폭을 설정하는 대역폭 설정부;
    로그 데이터를 수집하는 간격을 설정하는 간격 설정부; 및
    로그 데이터를 수집하는 방식을 설정하는 수집 방식 설정부
    를 포함하는 로그 데이터 수집 장치.
  2. 삭제
  3. 제1항에 있어서,
    사용자 인터페이스를 통해 상기 파라미터들을 설정하기 위한 화면을 표시하고, 상기 사용자 인터페이스를 통한 사용자 입력에 따라 상기 설정부가 상기 파라미터들을 설정하는,
    로그 데이터 수집 장치.
  4. 제1항에 있어서,
    상기 파라미터들은 상기 수집부가 로그 데이터를 수집하는 상기 네트워크의 트래픽 상태에 따라서 적응적으로 설정되는,
    로그 데이터 수집 장치.
  5. 제1항에 있어서,
    상기 수집부는,
    상기 설비에 저장되는 로그 데이터의 증분 발생시 증분되는 로그 데이터를 수집하는 증분 수집부; 및
    상기 설비에 저장되는 로그 데이터의 풀 스캔에 기반하여 로그 데이터의 변경이 있는 경우에 변경된 로그 데이터를 수집하는 복제 수집부
    를 포함하며,
    상기 수집부는 상기 설정부의 수집 방식 설정부에 설정되어 있는 수집 방식에 따라서 상기 증분 수집부 또는 상기 복제 수집부를 선택하여 로그 데이터를 수집하는,
    로그 데이터 수집 장치.
  6. 제5항에 있어서,
    상기 증분 수집부는
    상기 설비에 저장되는 로그 데이터에 대해 라인의 증분이 발생하는 경우에 증분된 라인의 로그 데이터를 수집하는,
    로그 데이터 수집 장치.
  7. 제5항에 있어서,
    상기 설정부는 수집되는 로그 데이터의 저장 위치 정보가 저장되는 저장 위치 설정부를 더 포함하고,
    상기 수집부는 상기 설비의 장애 또는 상기 네트워크의 장애로 인해 로그 데이터의 수집이 중단되는 경우 수집된 로그 데이터의 최종 저장 위치를 상기 저장 위치 설정부에 저장하고,
    상기 수집부는 장애 복구 후에 상기 저장 위치 설정부에 저장된 최종 저장 위치를 사용하여 로그 데이터의 수집을 재개하는,
    로그 데이터 수집 장치.
  8. 제1항에 있어서,
    상기 설정부는 상기 설비의 운영 상태의 변경 사항 추적을 위한 구성 스냅샷(Configuration Snapshot)을 추가로 저장하는,
    로그 데이터 수집 장치.
  9. 제1항에 있어서,
    상기 복수의 설비로부터 수집되는 로그 데이터 및 로그 수집 이력 데이터를 저장하는 저장부를 더 포함하고,
    상기 설정부는 상기 저장부에 저장되는 이력 데이터를 삭제하는 주기를 추가로 설정하는,
    로그 데이터 수집 장치.
KR1020170074959A 2017-06-14 2017-06-14 로그 데이터 수집 장치 KR101956602B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170074959A KR101956602B1 (ko) 2017-06-14 2017-06-14 로그 데이터 수집 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170074959A KR101956602B1 (ko) 2017-06-14 2017-06-14 로그 데이터 수집 장치

Publications (2)

Publication Number Publication Date
KR20180136250A KR20180136250A (ko) 2018-12-24
KR101956602B1 true KR101956602B1 (ko) 2019-03-12

Family

ID=65010024

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170074959A KR101956602B1 (ko) 2017-06-14 2017-06-14 로그 데이터 수집 장치

Country Status (1)

Country Link
KR (1) KR101956602B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012046293A1 (ja) * 2010-10-04 2012-04-12 富士通株式会社 障害監視装置、障害監視方法及びプログラム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7617256B2 (en) * 2004-07-19 2009-11-10 Microsoft Corporation Remote file updates through remote protocol

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012046293A1 (ja) * 2010-10-04 2012-04-12 富士通株式会社 障害監視装置、障害監視方法及びプログラム

Also Published As

Publication number Publication date
KR20180136250A (ko) 2018-12-24

Similar Documents

Publication Publication Date Title
US7870237B2 (en) Network configuration restoration method and system
CN109739810B (zh) 文件同步方法、服务器、客户端及具有存储功能的装置
EP1548595B1 (en) Method of monitoring status information of remote storage and storage subsystem
US7035943B2 (en) Web server content replication
US6976093B2 (en) Web server content replication
CN103795580A (zh) 一种数据监控方法、系统及相关设备
US20100088197A1 (en) Systems and methods for generating remote system inventory capable of differential update reports
CN113687974B (zh) 客户端日志处理方法、装置及计算机设备
CN106411629B (zh) 一种用于监控cdn节点的状态的方法和设备
KR20020009556A (ko) 웹 서버 콘텐츠 복제
JP2008191878A (ja) 遠隔診断・障害対応システム、遠隔診断・障害対応装置、遠隔診断・障害対応指示装置、遠隔診断・障害対応方法、及び遠隔診断・障害対応プログラム
JP4958951B2 (ja) コンテンツ収集
JP5029004B2 (ja) 分析装置制御システム
CN103310154A (zh) 信息安全处理的方法、设备和系统
KR101956602B1 (ko) 로그 데이터 수집 장치
JP5375281B2 (ja) 障害解析情報採取装置、障害解析情報採取方法、障害解析情報採取プログラム
CN106685744A (zh) 一种故障排除方法、装置及系统
US20160085638A1 (en) Computer system and method of identifying a failure
US11745036B2 (en) Fire protection system
US8443061B2 (en) Data transmission method and communication control apparatus
CN105630637A (zh) 一种软件备份、还原方法及终端
US20030200309A1 (en) Transmission network system
WO2020123261A1 (en) Collecting repeated diagnostics data from across users participating in a document collaboration session
KR100671789B1 (ko) 유무선 분산 환경하의 공간 데이터간의 데이터 전송과데이터 동기화 방법 및 그러한 방법의 실행을 위한 분산공간 데이터 동기화 시스템
CN115277351B (zh) 一种分布式管理系统

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant