KR101786865B1 - Ｄｂｍｓ별로 생성되는 아카이브 로그 통합 관리 시스템 - Google Patents

Ｄｂｍｓ별로 생성되는 아카이브 로그 통합 관리 시스템 Download PDF

Info

Publication number
KR101786865B1
KR101786865B1 KR1020160064053A KR20160064053A KR101786865B1 KR 101786865 B1 KR101786865 B1 KR 101786865B1 KR 1020160064053 A KR1020160064053 A KR 1020160064053A KR 20160064053 A KR20160064053 A KR 20160064053A KR 101786865 B1 KR101786865 B1 KR 101786865B1
Authority
KR
South Korea
Prior art keywords
agent
transaction data
dbms
archive log
log
Prior art date
Application number
KR1020160064053A
Other languages
English (en)
Inventor
임래송
Original Assignee
(주)알투비솔루션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)알투비솔루션 filed Critical (주)알투비솔루션
Priority to KR1020160064053A priority Critical patent/KR101786865B1/ko
Application granted granted Critical
Publication of KR101786865B1 publication Critical patent/KR101786865B1/ko

Links

Images

Classifications

    • G06F17/30212—
    • G06F17/30185—
    • G06F17/30194—
    • G06F17/30227—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/16—Threshold monitoring

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 RAC 환경에서 DBMS 시스템(node)별로 분산되어 있는 아카이브 로그를 고가의 공유파일시스템을 구성하지 않고 특정 시스템에서 모두 접근 가능하도록 자동적으로 통합 및 관리할 수 있는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템을 제공하는 것을 목적으로 한다.
상기 목적을 달성하기 위해, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, DBMS(Database management system) 소스에서 신규 아카이브 로그를 감지 및 수집하여 전송하는 제 1 에이전트와, 상기 DBMS 소스의 상기 제 1 에이전트가 전송한 상기 아카이브 로그를 수신함과 아울러 수신된 상기 아카이브 로그를 미리 지정된 소정 경로에 저장하는 제 2 에이전트와, 상기 DBMS 소스의 리두 로그로부터 복제 대상 테이블의 변경 트랜잭션 데이터를 추출하여 전송하는 제 3 에이전트를 갖는 운영 서버; 및 상기 제 3 에이전트로부터 전송된 상기 변경 트랜잭션 데이터를 분류하여 미리 지정된 소정 큐에 저장하는 제 4 에이전트와, 상기 큐에 저장된 상기 변경 트랜잭션 데이터를 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS에 반영하는 제 5 에이전트와, 상기 변경 트랜잭션 데이터에 대한 정보를 관리 및 관제하는 관제부를 갖는 복제서버를 포함한다.

Description

ＤＢＭＳ별로 생성되는 아카이브 로그 통합 관리 시스템{ARCHIVE LOG INTERGRATED MANAGEMENT SYSTEM GENERATED BY DATABASE MANAGEMENT SYSTEM}
본 발명은 통합 관리 시스템에 관한 것으로, 더욱 상세하게는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템에 관한 것이다.
RAC(Real Application Cluster) 환경에서는 여러개의 물리적인 시스템들이 동일 DBMS(Database management system)로 인식되도록 구성된다. 이때 일반적으로 각 DBMS 시스템(node)별로 로컬 디스크에 아카이브 로그를 저장하도록 설정된다. 이러한 환경에서 CDC(Change Data Capture) 방식의 DBMS 실시간 복제 솔루션은 RAC의 모든 노드에서 발생되는 아카이브 로그에 모두 접근이 가능해야만 로그를 참조하여 변경 트랜잭션 데이터의 추출이 가능하므로 이에 대한 하드웨어적인 구성 변경이 필요하다.
따라서, 실시간 복제 솔루션 적용을 위해 공유파일시스템을 구성하여 각 DBMS 시스템(node)별로 발생되는 아카이브 로그가 공유파일시스템에 저장되도록 설정함으로써 모든 시스템에서 접근 가능하도록 해 주어야 하는데, 이는 고가의 투자가 발생하여 RAC 환경에서의 실시간 복제 솔루션 도입에 큰 장애가 되고 있다.
이에 본 발명은 상기한 바와 같은 요구를 해소하기 위해 제안된 것으로서, 그 목적은 RAC 환경에서 DBMS 시스템(node)별로 분산되어 있는 아카이브 로그를 고가의 공유파일시스템을 구성하지 않고 특정 시스템에서 모두 접근 가능하도록 자동적으로 통합 및 관리할 수 있는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템에 관한 것이다.
상기 목적을 달성하기 위해, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, DBMS(Database management system) 소스에서 신규 아카이브 로그를 감지 및 수집하여 전송하는 제 1 에이전트와, 상기 DBMS 소스의 상기 제 1 에이전트가 전송한 상기 아카이브 로그를 수신함과 아울러 수신된 상기 아카이브 로그를 미리 지정된 소정 경로에 저장하는 제 2 에이전트와, 상기 DBMS 소스의 리두 로그로부터 복제 대상 테이블의 변경 트랜잭션 데이터를 추출하여 전송하는 제 3 에이전트를 갖는 운영 서버; 및 상기 제 3 에이전트로부터 전송된 상기 변경 트랜잭션 데이터를 분류하여 미리 지정된 소정 큐에 저장하는 제 4 에이전트와, 상기 큐에 저장된 상기 변경 트랜잭션 데이터를 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS에 반영하는 제 5 에이전트와, 상기 변경 트랜잭션 데이터에 대한 정보를 관리 및 관제하는 관제부를 갖는 복제서버를 포함한다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 제 2 에이전트로 상기 아카이브 로그를 전송 중 네트워크 장애로 인한 전송 실패시, 상기 제 1 에이전트는 네트워크 장애 시점으로부터 다시 상기 아카이브 로그를 전송하는 제 1 장애 관리를 수행한다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 제 4 에이전트로 상기 변경 트랜잭션 데이터를 전송 중 네트워크 장애로 인한 전송 실패시, 상기 제 3 에이전트는 네트워크 장애 시점으로부터 다시 상기 변경 트랜잭션 데이터를 전송하는 제 2 장애 관리를 수행한다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 제 5 에이전트는 상기 변경 트랜잭션 데이터를 사용자의 지정에 따른 소정 함수 또는 프로시저(procedure)에 의해 가공하여 상기 복제 DBMS에 반영한다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 큐에 저장된 상기 변경 트랜잭션 데이터는 단일쓰레드로 전송되며, 상기 제 4 에이전트에 의해 상기 큐는 PK 컬럼 또는 유니크 인덱스(unique index) 컬럼 중 어느 하나를 병렬로 동시에 트랜잭션하여 상기 복제 DBMS에 복제된다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 제 5 에이전트는 멀티쓰레드의 개수만큼 DB 커넥션을 생성하며, 동일한 상기 PK 컬럼 또는 동일한 상기 유니크 인덱스 컬럼을 갖는 트랜잭션들은 하나의 상기 DB 커넥션을 사용하여 복제된다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 멀티쓰레드에 의한 복제 중 상기 PK 컬럼 또는 유니크 인덱스(unique index) 컬럼의 값이 변경될 경우, 단일쓰레드로 전환되어 하나의 DB 커넥션 만을 사용하며 순차적으로 복제된다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 제 1 에이전트는 상기 제 2 에이전트로 상기 아카이브 로그 파일을 전송 중 사용자가 미리 설정한 임계치에 따른 네트워크 부하가 발생할 경우 부하량을 식별하고 상기 아카이브 로그 파일을 압축하여 전송함과 아울러 상기 네트워크 부하가 감소할 경우 상기 아카이브 로그 파일의 압축을 해제하여 전송한다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템은, 상기 제 1 에이전트는 아카이브 로그 파일을 전송시 해당 경로에 상기 아카이브 로그 파일 이외의 파일이 있더라도, 해당 아카이브 로그 파일에 대한 DSMS 아카이브 로그 파일 형식, 데이터베이스 로그 시퀀스 순서, 생성 날자 및 시간, 전송 여부를 식별함으로써 아카이브 로그 파일만을 전송한다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 방법은, DBMS(Database management system) 소스에서 신규 아카이브 로그를 제 1 에이전트가 감지 및 수집하여 전송하는 제 1 단계(S100)와, 상기 DBMS 소스의 상기 제 1 에이전트가 전송한 상기 아카이브 로그를 제 2 에이전트가 수신함과 아울러 수신된 상기 아카이브 로그를 미리 지정된 소정 경로에 저장하는 제 2 단계(S200)와, 상기 DBMS 소스의 리두 로그로부터 복제 대상 테이블의 변경 트랜잭션 데이터를 제 3 에이전트가 추출하여 전송하는 제 3 단계(S300)와, 상기 제 3 에이전트로부터 전송된 상기 변경 트랜잭션 데이터를 제 4 에이전트가 분류하여 미리 지정된 소정 큐에 저장하는 제 4 단계(S400)와, 상기 큐에 저장된 상기 변경 트랜잭션 데이터를 제 5 에이전트가 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS에 반영하는 제 5 단계(S500)를 포함한다.
본 발명에 의하면, RAC 환경에서 DBMS 시스템(node)별로 분산되어 있는 아카이브 로그를 고가의 공유파일시스템을 구성하지 않고 특정 시스템에서 모두 접근 가능하도록 자동적으로 통합 및 관리할 수 있는 효과가 있다.
또한, 최근 실시간 데이터 통합 및 재해 복구 시스템 구축 등을 위해 도입이 확산되고 있는 실시간 복제 솔루션 적용시, 아카이브 로그에 대한 고가의 공유파일시스템의 추가 구성 등이 불필요하게 되어 비용 절감 및 실시간 복제 솔루션의 활발한 도입 확산이 가능한 효과가 있다.
도 1은 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 운영 서버 구성을 나타내는 블록도.
도 2는 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 복제 서버 구성을 나타내는 블록도.
도 3은 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 전체 구성을 나타내는 블록도.
도 4는 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 복제 서버에서 수행되는 멀티쓰레드 방식에 의한 데이터 복제 구조를 나타내는 도면.
도 5는 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 방법의 전체 흐름을 나타내는 플로어 차트.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
또한, 명세서에 기재된 "…부", "…모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
이하, 본 발명의 실시예에 대해 관련 도면들을 참조하여 상세히 설명하기로 한다.
우선, 도 1은 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 운영 서버 구성을 나타내는 블록도이고, 도 2는 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 복제 서버 구성을 나타내는 블록도이며, 도 3은 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 전체 구성을 나타내는 블록도이다.
도 1 내지 도 3을 참조하면, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템(1000)은 DMS(Database management system)(170) 소스에서 신규 아카이브 로그(141, 142, 143, …)를 감지 및 수집하여 전송하는 제 1 에이전트(110)와, DBMS(170) 소스의 제 1 에이전트(110)가 전송한 아카이브 로그(141, 142, 143, …)를 수신함과 아울러 수신된 아카이브 로그(141, 142, 143, …)를 미리지정된 소정 경로에 저장하는 제 2 에이전트(120)와, DBMS(170) 소스의 리두 로그(171)로부터 복제 대상 테이블의 변경 트랜잭션 데이터를 추출하여 전송하는 제 3 에이전트(130)를 포함하는 운영 서버(100); 및 제 3 에이전트(130)로부터 전송된 변경 트랜잭션 데이터를 분류하여 미리 지정된 소정의 큐(240)에 저장하는 제 4 에이전트(210)와, 큐(240)에 저장된 변경 트랜잭션 데이터를 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS(250)에 반영하는 제 5 에이전트(220)와, 변경 트랜잭션 데이터에 대한 정보를 관리 및 관제하는 관제부(230)를 갖는 복제 서버(200)를 포함한다.
본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템(1000)의 운영 서버(100)는 제 1 에이전트(110)와, 제 2 에이전트(120)와, 제 3 에이전트(130)를 포함한다.
여기서, 운영 서버(100)의 제 1 에이전트(110)는 DMS(Database management system)(170) 소스의 신규 아카이브 로그(141, 142, 143, …)를 감지 및 수집하여 제 2 에이전트(120)에 전송한다.
또한, 제 2 에이전트(120)는 DBMS(170) 소스의 제 1 에이전트(110)가 전송한 아카이브 로그(141, 142, 143, …)를 수신함과 아울러 수신된 아카이브 로그(141, 142, 143, …)를 미리지정된 소정 경로에 저장하게 된다.
이와 같이 미리지정된 소정 경로에 저장되어 축적된 아카이브 로그(141, 142, 143, …)가 포함된 DBMS(170) 소스의 리두 로그(171)의 복제 대상 테이블의 변경 트랜잭션 데이터를 제 3 에이전트(130)가 추출하여 후술하는 제 4 에이전트에 전송하게 된다.
한편, 복제 서버(200)는 제 4 에이전트(210)와, 제 5 에이전트(220)와, 관제부(230)를 포함한다.
우선, 제 3 에이전트(130)로부터 전송된 변경 트랜잭션 데이터를 제 4 에이전트(210)가 분류하여 미리 지정된 소정의 큐(240)에 저장하게 된다.
또한, 큐(240)에 저장된 변경 트랜잭션 데이터를 제 5 에이전트(220)가 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS(250)에 반영하게 된다.
한편, 관제부(230)는 변경 트랜잭션 데이터에 대한 정보를 관리 및 관제하게 된다.
여기서, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템(1000)의 제 5 에이전트(220)는 변경 트랜잭션 데이터를 사용자의 지정에 따른 소정 함수 또는 프로시저(procedure)에 의해 가공하여 복제 DBMS(250)에 반영할 수 있다.
예컨데, 제 5 에이전트(220)는 A라는 변경 트랜잭션 데이터를 사용자가 지정한 소정 함수 또는 프로시저에 의해 가공하여 B라는 데이터를 획득하게 되면, 복제 DBMS(250)에 B라는 변환된 데이터를 반영하게 된다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템(1000)에서, 제 2 에이전트(120)로 아카이브 로그(141, 142, 143, …)를 전송 중 네트워크 장애로 인한 전송 실패시, 제 1 에이전트(110)는 네트워크 장애 시점으로부터 다시 아카이브 로그(141, 142, 143, …)를 전송하는 제 1 장애 관리를 수행할 수 있다.
마찬가지로, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템(1000)에서, 제 4 에이전트(140)로 변경 트랜잭션 데이터를 전송 중 네트워크 장애로 인한 전송 실패시, 제 3 에이전트(130)는 네트워크 장애 시점으로부터 다시 변경 트랜잭션 데이터를 전송하는 제 2 장애 관리를 수행할 수 있다.
또한, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템(1000)은, 제 1 에이전트(110)가 제 2 에이전트(120)로 아카이브 로그(141, 142, 143, …)를 전송 중 네트워크 부하(사용자가 설정한 임계치)가 발생할 경우 부하량을 식별(체크)하고 아카이브 로그(141, 142, 143, …)를 압축하여 전송함과 아울러 네트워크 부하가 감소할 경우 아카이브 로그(141, 142, 143, …)의 압축을 해제하여 전송한다. 물론, 제 3 에이전트(130)가 제 4 에이전트(140)에 아카이브 로그(141, 142, 143, …)를 전송할 경우에도 네트워크 부하가 발생시 아카이브 로그(141, 142, 143, …)를 압축하여 전송할 수 있다.
한편, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템(1000)은, 제 1 에이전트(110)는 아카이브 로그(141, 142, 143, …)를 전송시 해당 경로에 아카이브 로그(141, 142, 143, …) 이외의 파일이 있더라도, 해당 아카이브 로그(141, 142, 143, …)에 대한 DSMS 아카이브 로그 파일 형식, 데이터베이스 로그 시퀀스 순서, 생성 날자 및 시간, 전송 여부 등을 식별(체크)함으로써 아카이브 로그 파일만을 전송한다.
이에 의해, 제 1 에이전트(110)는 제 2 에이전트(120)로 아카이브 로그(141, 142, 143, …)만을 좀더 안전하게 전송할 수 있다.
다음, 도 4는 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템의 복제 서버에서 수행되는 멀티쓰레드 방식에 의한 데이터 복제 구조를 나타내는 도면이다.
도 4를 참조하여, 멀티쓰레드 방식에 의해 복제되는 데이터 복제 구조에 대해 설명한다.
상술한 바와 같이, 복제 서버(200)의 제 4 에이전트(210)는 변경된 트랜잭션 정보를 분류하여 미리 지정된 소정의 큐(240)에 저장하게 된다. 이러한 변경된 트랜잭션 정보를 이용하여 온라인 리두 파일을 복제하는 방법은 다음과 같다. 트랜잭션 정보는 큐(queue)(240)의 구조로 되어 있다. 트랜잭션들은 PK 컬럼(241) 또는 유니크 인덱스(unique index) 컬럼(242) 중 어느 하나를 병렬(parallel) 기준으로 하여 큐(240)를 구성하게 된다. 예를 들면, 트랜잭션이 PK 컬럼(241)을 기준으로 하여 큐(240)를 구성할 경우에는, PK = 100, PK = 200, PK = 300, PK = 400 등으로 구성된다. 또한, 트랜잭션이 유니크 인덱스 컬럼(242)을 기준으로 하여 큐(240)를 구성할 경우에는, (TX#1), (TX#2), (TX#3), (TX#4), (TX#5), (TX#6), (TX#7) 등으로 구성된다. 물론, 본 발명에서는 설명의 용이함을 위해, 도 4에 도시된 바와 같이, 7개의 트랜잭션을 예로써 설명하였지만, 이에 한정되는 것은 아니다.
다음, 큐(240)를 전송받은 제 5 에이전트(220)는 멀티쓰레드(244)의 개수만큼 DB 커넥션(243)을 생성한다. 여기서, 동일한 멀티 키(동일한 PK 컬럼 또는 유니크 인덱스 컬럼)를 가진 트랜잭션들은 하나의 DB 커넥션(243)을 사용하여 순차적으로 복제 서버(200)의 DBMS(250)로 복제하게 된다. 여기서, 멀티쓰레드(244)의 개수는 트랜잭션의 발생량에 따라 적절히 조절할 수 있다.
요약하면, 큐(240)에 저장된 변경 트랜잭션 데이터는 단일쓰레드로 전송되며, 제 4 에이전트(140)에 의해 큐(240)는 PK 컬럼(241) 또는 유니크 인덱스(unique index) 컬럼(242) 중 어느 하나를 병렬로 동시에 트랜잭션하여 복제 DBMS(250)에 복제된다.
여기서, 제 5 에이전트(220)는 멀티쓰레드의 개수만큼 DB 커넥션(243)을 생성하며, 동일한 PK 컬럼(241) 또는 동일한 유니크 인덱스 컬럼(242)을 갖는 트랜잭션들은 하나의 DB 커넥션(243)을 사용하여 복제된다.
한편, 멀티쓰레드(244)에 의한 복제 중 PK 컬럼(241) 또는 유니크 인덱스(unique index) 컬럼(242)의 값이 변경될 경우, 단일쓰레드로 전환되어 하나의 DB 커넥션(243) 만을 사용하며 순차적으로 복제된다.
다음, 도 5는 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 방법의 전체 흐름을 나타내는 플로어 차트이다.
도 5를 참조하면, 본 발명에 따른 DBMS별로 생성되는 아카이브 로그 통합 관리 방법은, 운영 서버(100)의 DBMS(170) 소스에서 신규 아카이브 로그(141, 142, 143, …)를 제 1 에이전트(110)가 감지 및 수집하여 전송하는 제 1 단계(S100)와, DBMS(170) 소스의 제 1 에이전트(110)가 전송한 아카이브 로그(141, 142, 143, …)를 제 2 에이전트(120)가 수신함과 아울러 수신된 아카이브 로그(141, 142, 143, …)를 미리 지정된 소정 경로에 저장하는 제 2 단계(S200)와, DBMS(170) 소스의 리두 로그(171)로부터 복제 대상 테이블의 변경 트랜잭션 데이터를 제 3 에이전트(130)가 추출하여 전송하는 제 3 단계(S300)와, 제 3 에이전트(130)로부터 전송된 변경 트랜잭션 데이터를 복제 서버(200)의 제 4 에이전트(210)가 분류하여 미리 지정된 소정 큐(240)에 저장하는 제 4 단계(S400)와, 큐(240)에 저장된 변경 트랜잭션 데이터를 제 5 에이전트(250)가 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS(250)에 반영하는 제 5 단계(S500)를 포함한다.
이와 같이 본 발명에 따른 아카이브 로그 통합 관리 시스템(1000)은 실시간으로 데이터를 통합할 수 있다. 즉, 실시간으로 데이터를 DW, ERP, CRM 등으로 복제를 수행하여 데이터 이관을 수행할 수 있다. 또한, 시스템간 연동이 필요한 데이터만을 선택적으로 추출하여 실시간 복제 수행이 가능하다.
한편, 재해 복구 시스템(DR)을 구축할 수 있다. Active-Active 방식의 재해 복구 시스템 구축, 즉 실시간 복제를 통해 서비스의 중단을 최소화할 수 있다.
또한, 무정지 마이그레이션 및 업그레이드가 가능하다. 즉, ERP, CRM 시스템 등 업그레이드시 실시간 복제를 통해 다운타임(downtime)을 최소화하고, 데이터베이스 업그레이드시 실시간 복제를 통해 다운타임을 최소화할 수 있다.
마지막으로, 조회 전용 시스템의 구축이 가능하다. 즉, 조회성 데이터의 실시간 복제를 통해 조회성 업무를 구비용 주전산기에서 저가의 장비로 옮겨 수행하여 비용 절감 및 부하 분산할 수 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100 : 운영 서버
110 : 제 1 에이전트
120 : 제 2 에이전트
130 : 제 3 에이전트
141, 142, 143, … : 아카이브 로그
151, 152, … : 로컬 디스크
160 : 제 1 큐
200 : 복제 서버
210 : 제 4 에이전트
220 : 제 5 에이전트
230 : 마스터
240 : 제 2 큐
250 : DBMS
1000 : 통합 관리 시스템

Claims (10)

  1. DBMS(Database management system) 소스에서 신규 아카이브 로그를 감지 및 수집하여 전송하는 제 1 에이전트와,
    상기 DBMS 소스의 상기 제 1 에이전트가 전송한 상기 아카이브 로그를 수신함과 아울러 수신된 상기 아카이브 로그를 미리 지정된 소정 경로에 저장하는 제 2 에이전트와,
    상기 DBMS 소스의 리두 로그로부터 복제 대상 테이블의 변경 트랜잭션 데이터를 추출하여 전송하는 제 3 에이전트를 갖는 운영 서버; 및
    상기 제 3 에이전트로부터 전송된 상기 변경 트랜잭션 데이터를 분류하여 미리 지정된 소정 큐에 저장하는 제 4 에이전트와,
    상기 큐에 저장된 상기 변경 트랜잭션 데이터를 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS에 반영하는 제 5 에이전트와,
    상기 변경 트랜잭션 데이터에 대한 정보를 관리 및 관제하는 관제부를 갖는 복제서버를 포함하되,
    상기 제 5 에이전트는 상기 변경 트랜잭션 데이터를 사용자의 지정에 따른 소정 함수 또는 프로시저(procedure)에 의해 가공하여 상기 복제 DBMS에 반영하는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  2. 제 1 항에 있어서,
    상기 제 2 에이전트로 상기 아카이브 로그를 전송 중 네트워크 장애로 인한 전송 실패시, 상기 제 1 에이전트는 네트워크 장애 시점으로부터 다시 상기 아카이브 로그를 전송하는 제 1 장애 관리를 수행하는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  3. 제 1 항에 있어서,
    상기 제 4 에이전트로 상기 변경 트랜잭션 데이터를 전송 중 네트워크 장애로 인한 전송 실패시, 상기 제 3 에이전트는 네트워크 장애 시점으로부터 다시 상기 변경 트랜잭션 데이터를 전송하는 제 2 장애 관리를 수행하는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  4. 삭제
  5. 제 1 항에 있어서,
    상기 큐에 저장된 상기 변경 트랜잭션 데이터는 단일쓰레드로 전송되며, 상기 제 4 에이전트에 의해 상기 큐는 PK 컬럼 또는 유니크 인덱스(unique index) 컬럼 중 어느 하나를 병렬로 동시에 트랜잭션하여 상기 복제 DBMS에 복제되는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  6. 제 5 항에 있어서,
    상기 제 5 에이전트는 멀티쓰레드의 개수만큼 DB 커넥션을 생성하며,
    동일한 상기 PK 컬럼 또는 동일한 상기 유니크 인덱스 컬럼을 갖는 트랜잭션들은 하나의 상기 DB 커넥션을 사용하여 복제되는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  7. 제 6 항에 있어서,
    상기 멀티쓰레드에 의한 복제 중 상기 PK 컬럼 또는 유니크 인덱스(unique index) 컬럼의 값이 변경될 경우, 단일쓰레드로 전환되어 하나의 DB 커넥션 만을 사용하며 순차적으로 복제되는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  8. 제 1 항에 있어서,
    상기 제 1 에이전트는 상기 제 2 에이전트로 상기 아카이브 로그를 전송 중 사용자가 미리 설정한 임계치에 따른 네트워크 부하가 발생할 경우 부하량을 식별하고 상기 아카이브 로그를 압축하여 전송함과 아울러 상기 네트워크 부하가 감소할 경우 상기 아카이브 로그의 압축을 해제하여 전송하는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  9. 제 1 항에 있어서,
    상기 제 1 에이전트는 아카이브 로그를 전송시 해당 경로에 상기 아카이브 로그 이외의 파일이 있더라도, 해당 아카이브 로그에 대한 DSMS 아카이브 로그 파일 형식, 데이터베이스 로그 시퀀스 순서, 생성 날자 및 시간, 전송 여부를 식별함으로써 아카이브 로그만을 전송하는 DBMS별로 생성되는 아카이브 로그 통합 관리 시스템.
  10. DBMS(Database management system) 소스에서 신규 아카이브 로그를 제 1 에이전트가 감지 및 수집하여 전송하는 제 1 단계(S100)와,
    상기 DBMS 소스의 상기 제 1 에이전트가 전송한 상기 아카이브 로그를 제 2 에이전트가 수신함과 아울러 수신된 상기 아카이브 로그를 미리 지정된 소정 경로에 저장하는 제 2 단계(S200)와,
    상기 DBMS 소스의 리두 로그로부터 복제 대상 테이블의 변경 트랜잭션 데이터를 제 3 에이전트가 추출하여 전송하는 제 3 단계(S300)와,
    상기 제 3 에이전트로부터 전송된 상기 변경 트랜잭션 데이터를 제 4 에이전트가 분류하여 미리 지정된 소정 큐에 저장하는 제 4 단계(S400)와,
    상기 큐에 저장된 상기 변경 트랜잭션 데이터를 제 5 에이전트가 추출한 후 SQL 구문으로 변환함과 아울러 복제 DBMS에 반영하는 제 5 단계(S500)를 포함하되,
    상기 제 5 에이전트는 상기 변경 트랜잭션 데이터를 사용자의 지정에 따른 소정 함수 또는 프로시저(procedure)에 의해 가공하여 상기 복제 DBMS에 반영하는 DBMS별로 생성되는 아카이브 로그 통합 관리 방법.
KR1020160064053A 2016-05-25 2016-05-25 Ｄｂｍｓ별로 생성되는 아카이브 로그 통합 관리 시스템 KR101786865B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160064053A KR101786865B1 (ko) 2016-05-25 2016-05-25 Ｄｂｍｓ별로 생성되는 아카이브 로그 통합 관리 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160064053A KR101786865B1 (ko) 2016-05-25 2016-05-25 Ｄｂｍｓ별로 생성되는 아카이브 로그 통합 관리 시스템

Publications (1)

Publication Number Publication Date
KR101786865B1 true KR101786865B1 (ko) 2017-10-19

Family

ID=60298285

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160064053A KR101786865B1 (ko) 2016-05-25 2016-05-25 Ｄｂｍｓ별로 생성되는 아카이브 로그 통합 관리 시스템

Country Status (1)

Country Link
KR (1) KR101786865B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190063835A (ko) * 2017-11-30 2019-06-10 주식회사 리얼타임테크 인-메모리 데이터베이스의 실시간 데이터 변경 처리 시스템
US11500833B2 (en) 2020-07-10 2022-11-15 International Business Machines Corporation Archiving accelerator-only database tables

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100250491A1 (en) 2007-05-21 2010-09-30 Jin Eun Sook Data replication method and system for database management system
US20150095289A1 (en) 2013-09-27 2015-04-02 International Business Machines Corporation Archival management of database logs

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100250491A1 (en) 2007-05-21 2010-09-30 Jin Eun Sook Data replication method and system for database management system
US20150095289A1 (en) 2013-09-27 2015-04-02 International Business Machines Corporation Archival management of database logs

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190063835A (ko) * 2017-11-30 2019-06-10 주식회사 리얼타임테크 인-메모리 데이터베이스의 실시간 데이터 변경 처리 시스템
KR102038529B1 (ko) 2017-11-30 2019-10-30 주식회사 리얼타임테크 인-메모리 데이터베이스의 실시간 데이터 변경 처리 시스템
US11500833B2 (en) 2020-07-10 2022-11-15 International Business Machines Corporation Archiving accelerator-only database tables

Similar Documents

Publication Publication Date Title
CN112099918B (zh) 容器化环境中的集群的实时迁移
KR101904786B1 (ko) 소스 데이터베이스 관리시스템에서 변경되는 데이터를 실시간으로 목표 데이터베이스 관리시스템에 복제하는 장치 및 그 방법
US10282247B2 (en) Distributed database management system with node failure detection
EP1548595B1 (en) Method of monitoring status information of remote storage and storage subsystem
US20040225697A1 (en) Storage operation management program and method and a storage management computer
US20060129772A1 (en) Data processing method and system
EP0216535A2 (en) Integration of computer systems with heterogeneous data bases
US20050015407A1 (en) System and method of relational configuration mirroring
CN102254031A (zh) 基于批处理请求的Microsoft SQL Server数据库集群
US20180026863A1 (en) Integrated storage/san monitoring and control system
US20130086418A1 (en) Data processing failure recovery method, system and program
KR100968301B1 (ko) 복사 기능 자동 선택 방법, 장치 및 컴퓨터 판독가능한 저장 매체
CN103473328A (zh) 一种基于mysql的数据库云及其建立方法
KR101786865B1 (ko) Ｄｂｍｓ별로 생성되는 아카이브 로그 통합 관리 시스템
CN101196901B (zh) 用于数据库查询的计算机系统和方法
US20220318265A1 (en) System And Method For Switching From Consistent Database To An Eventual Consistent Database Replica In Real Time While Preventing Reads Of Past Versions Of The Data
US7694012B1 (en) System and method for routing data
JP6744545B2 (ja) 情報処理装置、情報処理プログラムおよび情報処理システム
CN112363838A (zh) 数据处理方法及装置、存储介质、电子装置
CN112417050A (zh) 数据同步方法和装置、系统、存储介质及电子装置
KR102124954B1 (ko) 이기종 데이터베이스 관리 시스템을 동시 지원하기 위한 IoT 플랫폼 시스템 및 그 동작 방법
CN107330065A (zh) 一种基于ISER协议的MySQL数据库复制方法
US20020161849A1 (en) Probationary members
WO2011026661A1 (en) Shared-bandwidth multiple target remote copy
KR100671789B1 (ko) 유무선 분산 환경하의 공간 데이터간의 데이터 전송과데이터 동기화 방법 및 그러한 방법의 실행을 위한 분산공간 데이터 동기화 시스템

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant