KR101009149B1 - 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 - Google Patents
오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 Download PDFInfo
- Publication number
- KR101009149B1 KR101009149B1 KR1020080048781A KR20080048781A KR101009149B1 KR 101009149 B1 KR101009149 B1 KR 101009149B1 KR 1020080048781 A KR1020080048781 A KR 1020080048781A KR 20080048781 A KR20080048781 A KR 20080048781A KR 101009149 B1 KR101009149 B1 KR 101009149B1
- Authority
- KR
- South Korea
- Prior art keywords
- owner
- file
- metadata
- server
- replica
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
- G06F16/184—Distributed file systems implemented as replicated file system
- G06F16/1844—Management specifically adapted to replicated file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
Abstract
Description
Claims (23)
- 파일이 속한 디렉토리에 기초하여 결정되는 오너(owner) 단위에 따라 파일을 그룹화하여 상기 오너 별 복제본을 저장하고, 상기 오너에 속한 파일에 대한 연산을 수행하는 데이터 서버; 및상기 오너 별 복제본의 저장 위치 정보로 구성된 상기 오너 별 메타데이터를 저장하는 메타데이터 서버를 포함하고,상기 메타데이터 서버는,소정의 오너에 대한 메타데이터 요청을 수신하는 경우, 상기 소정의 오너의 복제본의 저장 위치에 대응하는 메타데이터를 반환하는 것을 특징으로 하는 분산 파일 시스템.
- 오너(owner) 단위에 따라 파일을 그룹화하여 상기 오너 별 복제본을 저장하고, 상기 오너에 속한 파일에 대한 연산을 수행하는 데이터 서버; 및상기 오너 별 복제본의 저장 위치 정보로 구성된 상기 오너 별 메타데이터를 저장하는 메타데이터 서버를 포함하고,상기 메타데이터 서버는,상기 메타데이터를 요청한 클라이언트 서버의 저장 공간을 이용하여 상기 오너 별 메타데이터를 제공하는 분산 파일 시스템.
- 제1항에 있어서,상기 데이터 서버는,상기 오너 별로 생성된 복제본 중 어느 하나를 저장하는 것을 특징으로 하는 분산 파일 시스템.
- 제2항에 있어서,상기 메타데이터 서버는,소정의 오너에 대한 메타데이터 요청을 수신하는 경우, 상기 소정의 오너의 복제본의 저장 위치에 대응하는 메타데이터를 반환하는 것을 특징으로 하는 분산 파일 시스템.
- 제1항에 있어서,상기 데이터 서버는,소정의 오너에 속한 파일 연산 요청을 수신하는 경우, 상기 소정의 오너에 속한 파일을 연산하여 파일 연산 결과를 반환하는 것을 특징으로 하는 분산 파일 시스템.
- 제5항에 있어서,상기 데이터 서버는,직렬 호출 방식 또는 병렬 호출 방식 중 어느 하나의 방식에 따른 파일 쓰기에 대한 연산 요청을 수신하는 것을 특징으로 하는 분산 파일 시스템.
- 제1항에 있어서,상기 메타데이터 서버로부터 소정의 오너에 대한 메타데이터를 제공받아 상기 소정의 오너의 복제본 저장 위치를 확인하고, 상기 복제본 저장 위치에 대응하는 데이터 서버에 상기 소정의 오너에 속하는 파일 연산을 요청하는 클라이언트 서버를 더 포함하는 분산 파일 시스템.
- 파일이 속한 디렉토리에 기초하여 결정되는 오너 단위에 따라 파일을 그룹화하여 상기 오너 별 복제본을 저장하는 복제본 저장부; 및클라이언트 서버로부터 수신한 상기 오너에 속하는 파일에 대한 연산 요청에 대응하여 파일을 연산하고, 상기 오너에 속하는 파일에 대한 파일 연산 결과를 반환하는 파일 연산부를 포함하는 것을 특징으로 하는 데이터 서버.
- 제8항에 있어서,상기 오너에 대한 오너 디렉토리 및 상기 오너에 속하는 파일에 대한 파일 디렉토리를 저장하는 디렉토리 저장부를 더 포함하는 데이터 서버.
- 제9항에 있어서,상기 디렉토리 저장부는,상기 오너 디렉토리 또는 상기 파일 디렉토리 전체를 하나의 디렉토리 저장하거나 또는 복수의 서브 디렉토리로 나누어 저장하는 것을 특징으로 하는 데이터 서버.
- 제8항에 있어서,상기 오너 별 복제본에 장애가 발생하는 경우, 다른 데이터 서버와 일관성이 유지될 수 있도록 상기 장애가 발생한 복제본을 복구하는 복제본 복구부를 더 포함하는 데이터 서버.
- 파일이 속한 디렉토리에 기초하여 결정되는 오너 별 복제본의 저장 위치 정보인 상기 오너 별 메타데이터를 저장하는 메타데이터 저장부; 및클라이언트 서버로부터 수신한 소정의 오너에 대한 메타데이터의 요청에 따라 상기 소정의 오너의 복제본의 저장위치에 대응하는 메타데이터를 제공하는 메타데이터 제공부를 포함하는 것을 특징으로 하는 메타데이터 서버.
- 제12항에 있어서,상기 오너 별 복제본이 파일 연산을 통해 수정되었는 지 여부를 모니터링 하는 서버 모니터링부를 더 포함하고,상기 메타데이터 저장부는,상기 모니터링 된 결과를 반영하여 상기 오너 별 복제본에 대한 메타데이터를 업데이트하여 저장하는 것을 특징으로 하는 메타데이터 서버.
- 제12항에 있어서,상기 메타데이터 제공부는,상기 메타데이터를 요청한 클라이언트 서버의 저장 공간을 이용하여 상기 오너 별 메타데이터를 캐싱하여 제공하는 것을 특징으로 하는 메타데이터 서버.
- 제14항에 있어서,상기 메타데이터 제공부는,상기 클라이언트 서버로부터 수신한 오너 식별자에 대응하는 메타데이터 트리를 생성하여 상기 클라이언트 서버의 저장 공간에 캐싱하는 것을 특징으로 하는 메타데이터 서버.
- 제12항에 있어서,상기 오너 별 복제본을 저장하는 상기 데이터 서버의 장애 상태 정보를 관리하는 서버 상태 관리부를 더 포함하는 메타데이터 서버.
- 메타데이터 서버로부터 수신한 메타데이터를 이용하여 처리하고자 하는 파일이 속한 오너의 복제본 저장 위치를 확인하는 복제본 위치 확인부; 및상기 확인된 처리하고자 하는 파일이 속한 오너의 복제본이 저장된 데이터 서버에 파일 연산을 요청하여 파일 연산 결과를 수신하는 파일 연산 요청부를 포함하고,상기 오너는,상기 파일이 속한 디렉토리에 기초하여 결정되는 것을 특징으로 하는 클라이언트 서버.
- 제17항에 있어서,상기 복제본 위치 확인부는,상기 메타데이터 서버로부터 오너 식별자에 대응하는 메타데이터의 트리를 캐싱함으로써 메타데이터를 수신하는 것을 특징으로 하는 클라이언트 서버.
- 메타데이터 서버에 파일이 속하는 디렉토리에 기초하여 결정되는 소정의 오너에 대한 메타데이터를 요청하는 단계;상기 요청한 소정의 오너의 복제본의 저장 위치에 대응하는 메타데이터를 수신하여 상기 오너의 복제본이 저장된 데이터 서버를 확인하는 단계;상기 데이터 서버에 상기 오너에 속한 파일의 연산을 요청하는 단계; 및상기 파일에 대한 연산 결과를 상기 데이터 서버로부터 수신하는 단계;를 포함하고,것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항에 있어서,상기 데이터 서버는,오너 단위에 따라 파일을 그룹화하여 상기 오너 별 복제본을 저장하는 것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항에 있어서,상기 메타데이터 서버는,오너 별 복제본의 저장 위치 정보인 메타데이터를 저장하는 것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항에 있어서,상기 데이터 서버에 상기 오너에 속한 파일의 연산을 요청하는 단계는,상기 파일의 연산이 쓰기 연산인 경우, 상기 오너의 복제본이 저장된 데이터 서버에 대해 직렬 호출 방식 또는 병렬 호출 방식으로 파일의 연산 요청을 하는 것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항 내지 제22항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록 매체.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080048781A KR101009149B1 (ko) | 2008-05-26 | 2008-05-26 | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080048781A KR101009149B1 (ko) | 2008-05-26 | 2008-05-26 | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090122801A KR20090122801A (ko) | 2009-12-01 |
KR101009149B1 true KR101009149B1 (ko) | 2011-01-18 |
Family
ID=41685240
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080048781A KR101009149B1 (ko) | 2008-05-26 | 2008-05-26 | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101009149B1 (ko) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101682213B1 (ko) * | 2010-10-29 | 2016-12-02 | 에스케이텔레콤 주식회사 | 메타 데이터 서버, 서비스 서버, 비대칭 분산 파일 시스템 및 그 운용 방법 |
KR102036314B1 (ko) * | 2017-12-29 | 2019-10-25 | (주)터보소프트 | 분산 처리 기반 공간 웹 객체 검색 시스템 및 이를 이용한 분산 처리 기반 공간 웹 객체 검색 방법 |
KR101943570B1 (ko) * | 2018-03-28 | 2019-01-30 | 주식회사 리얼타임테크 | 분산 데이터베이스 시스템에서의 대용량 이동객체 데이터에 대한 분산처리 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20020065977A (ko) * | 2001-02-08 | 2002-08-14 | 주식회사 루틸러스테크놀러지 | 가상적으로 통합된 분산파일그룹에 데이터를 백업하기위한 방법 및 시스템 |
KR20060067119A (ko) * | 2004-12-14 | 2006-06-19 | 한국전자통신연구원 | 객체 기반 스토리지를 사용하는 분산 파일 서버에서 장애복구 시스템 및 방법 |
KR20090059859A (ko) * | 2007-12-07 | 2009-06-11 | 한국전자통신연구원 | 분산파일 시스템에서의 비동기식 데이터 복제 방법 및 그에따른 분산파일 시스템 |
KR20090063733A (ko) * | 2007-12-14 | 2009-06-18 | 한국전자통신연구원 | 다중 복제를 지원하는 분산 파일 시스템에서 데이터 서버의복구 방법 및 그에 적당한 메타데이터 스토리지 및 저장방법 |
-
2008
- 2008-05-26 KR KR1020080048781A patent/KR101009149B1/ko active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20020065977A (ko) * | 2001-02-08 | 2002-08-14 | 주식회사 루틸러스테크놀러지 | 가상적으로 통합된 분산파일그룹에 데이터를 백업하기위한 방법 및 시스템 |
KR20060067119A (ko) * | 2004-12-14 | 2006-06-19 | 한국전자통신연구원 | 객체 기반 스토리지를 사용하는 분산 파일 서버에서 장애복구 시스템 및 방법 |
KR20090059859A (ko) * | 2007-12-07 | 2009-06-11 | 한국전자통신연구원 | 분산파일 시스템에서의 비동기식 데이터 복제 방법 및 그에따른 분산파일 시스템 |
KR20090063733A (ko) * | 2007-12-14 | 2009-06-18 | 한국전자통신연구원 | 다중 복제를 지원하는 분산 파일 시스템에서 데이터 서버의복구 방법 및 그에 적당한 메타데이터 스토리지 및 저장방법 |
Also Published As
Publication number | Publication date |
---|---|
KR20090122801A (ko) | 2009-12-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10853339B2 (en) | Peer to peer ownership negotiation | |
US10339017B2 (en) | Methods and systems for using a write cache in a storage system | |
US9436720B2 (en) | Safety for volume operations | |
CN102594849B (zh) | 数据备份、恢复方法、虚拟机快照删除、回滚方法及装置 | |
US9274716B2 (en) | Systems and methods for hierarchical reference counting via sibling trees | |
US10831613B2 (en) | Replicating a source data set to a target data store | |
US10585611B2 (en) | Inline deduplication | |
US20120191675A1 (en) | Device and method for eliminating file duplication in a distributed storage system | |
EP4241166A1 (en) | Data connector component for implementing data requests | |
US7640588B2 (en) | Data processing system and method | |
US20160048529A1 (en) | Coalescing storage operations | |
KR101009149B1 (ko) | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 | |
CN111399760A (zh) | Nas集群元数据处理方法、装置、nas网关及介质 | |
WO2023197937A1 (zh) | 数据处理方法及其装置、存储介质、计算机程序产品 | |
US10712941B2 (en) | Leveraging temporal locality to link files together and bypass accessing a central inode list | |
CN109947704B (zh) | 一种锁类型切换方法、装置及集群文件系统 | |
KR20200101594A (ko) | 분산 파일 시스템에서 클라이언트 기반의 실시간 데이터 복구에 기반한 디코딩 처리 방법 및 이를 위한 장치 | |
KR100994342B1 (ko) | 분산 파일 시스템 및 복제본 기반 장애 처리 방법 | |
US20240054056A1 (en) | Recovery mechanism with selective ordering and concurrent operations | |
US20230350760A1 (en) | Physical size api for snapshots backed up to object store | |
KR102599116B1 (ko) | 데이터 중복 제거 방법 및 데이터 중복 제거를 수행하는 스토리지 장치 | |
US10719401B2 (en) | Increasing data recoverability during central inode list loss | |
KR100988107B1 (ko) | 분산 파일 시스템 및 복제본 상태 매칭을 이용한 파일일관성 관리 방법 | |
CN1813253A (zh) | 对共享的只读文件系统中的病毒的检测和报警 | |
JP5276391B2 (ja) | インテリジェント・コンテンツのインデックス付け実行技術 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
N231 | Notification of change of applicant | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20131231 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20151223 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20170102 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20180102 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20190102 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20200102 Year of fee payment: 10 |