KR20090122801A - 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 - Google Patents
오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 Download PDFInfo
- Publication number
- KR20090122801A KR20090122801A KR1020080048781A KR20080048781A KR20090122801A KR 20090122801 A KR20090122801 A KR 20090122801A KR 1020080048781 A KR1020080048781 A KR 1020080048781A KR 20080048781 A KR20080048781 A KR 20080048781A KR 20090122801 A KR20090122801 A KR 20090122801A
- Authority
- KR
- South Korea
- Prior art keywords
- owner
- file
- metadata
- server
- data server
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
- G06F16/184—Distributed file systems implemented as replicated file system
- G06F16/1844—Management specifically adapted to replicated file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
Claims (23)
- 오너(owner) 단위에 따라 파일을 그룹화하여 상기 오너 별 복제본을 저장하고, 상기 오너에 속한 파일에 대한 연산을 수행하는 데이터 서버; 및상기 오너 별 복제본의 저장 위치 정보로 구성된 상기 오너 별 메타데이터를 저장하는 메타데이터 서버를 포함하는 분산 파일 시스템.
- 제1항에 있어서,상기 오너는,상기 파일이 속한 디렉토리에 기초하여 결정되는 것을 특징으로 하는 분산 파일 시스템.
- 제1항에 있어서,상기 데이터 서버는,상기 오너 별로 생성된 복제본 중 어느 하나를 저장하는 것을 특징으로 하는 분산 파일 시스템.
- 제1항에 있어서,상기 메타데이터 서버는,소정의 오너에 대한 메타데이터 요청을 수신하는 경우, 상기 소정의 오너의 복제본의 저장 위치에 대응하는 메타데이터를 반환하는 것을 특징으로 하는 분산 파일 시스템.
- 제1항에 있어서,상기 데이터 서버는,소정의 오너에 속한 파일 연산 요청을 수신하는 경우, 상기 소정의 오너에 속한 파일을 연산하여 파일 연산 결과를 반환하는 것을 특징으로 하는 분산 파일 시스템.
- 제5항에 있어서,상기 데이터 서버는,직렬 호출 방식 또는 병렬 호출 방식 중 어느 하나의 방식에 따른 파일 쓰기에 대한 연산 요청을 수신하는 것을 특징으로 하는 분산 파일 시스템.
- 제1항에 있어서,상기 메타데이터 서버로부터 소정의 오너에 대한 메타데이터를 제공받아 상기 소정의 오너의 복제본 저장 위치를 확인하고, 상기 복제본 저장 위치에 대응하는 데이터 서버에 상기 소정의 오너에 속하는 파일 연산을 요청하는 클라이언트 서버를 더 포함하는 분산 파일 시스템.
- 오너 단위에 따라 파일을 그룹화하여 상기 오너 별 복제본을 저장하는 복제본 저장부; 및클라이언트 서버로부터 수신한 상기 오너에 속하는 파일에 대한 연산 요청에 대응하여 파일을 연산하는 파일 연산부를 포함하고,상기 오너는,상기 파일의 디렉토리에 기초하여 결정되는 것을 특징으로 하는 데이터 서버.
- 제8항에 있어서,상기 오너에 대한 오너 디렉토리 및 상기 오너에 속하는 파일에 대한 파일 디렉토리를 저장하는 디렉토리 저장부를 더 포함하는 데이터 서버.
- 제9항에 있어서,상기 디렉토리 저장부는,상기 오너 디렉토리 또는 상기 파일 디렉토리 전체를 하나의 디렉토리 저장하거나 또는 복수의 서브 디렉토리로 나누어 저장하는 것을 특징으로 하는 데이터 서버.
- 제8항에 있어서,상기 오너 별 복제본에 장애가 발생하는 경우, 다른 데이터 서버와 일관성이 유지될 수 있도록 상기 장애가 발생한 복제본을 복구하는 복제본 복구부를 더 포함하는 데이터 서버.
- 오너 별 복제본의 저장 위치 정보인 상기 오너 별 메타데이터를 저장하는 메타데이터 저장부; 및클라이언트 서버로부터 수신한 상기 메타데이터에 대한 요청에 대응하여 상기 메타데이터를 제공하는 메타데이터 제공부를 포함하고,상기 오너는,파일의 디렉토리에 기초하여 결정되는 것을 특징으로 하는 메타데이터 서버.
- 제12항에 있어서,상기 오너 별 복제본이 파일 연산을 통해 수정되었는 지 여부를 모니터링 하는 서버 모니터링부를 더 포함하고,상기 메타데이터 저장부는,상기 모니터링 된 결과를 반영하여 상기 오너 별 복제본에 대한 메타데이터를 업데이트하여 저장하는 것을 특징으로 하는 메타데이터 서버.
- 제12항에 있어서,상기 메타데이터 제공부는,상기 메타데이터를 요청한 클라이언트 서버의 저장 공간을 이용하여 상기 오너 별 메타데이터를 캐싱하여 제공하는 것을 특징으로 하는 메타데이터 서버.
- 제14항에 있어서,상기 메타데이터 제공부는,상기 클라이언트 서버로부터 수신한 오너 식별자에 대응하는 메타데이터 트리를 생성하여 상기 클라이언트 서버의 저장 공간에 캐싱하는 것을 특징으로 하는 메타데이터 서버.
- 제12항에 있어서,상기 오너 별 복제본을 저장하는 상기 데이터 서버의 장애 상태 정보를 관리하는 서버 상태 관리부를 더 포함하는 메타데이터 서버.
- 메타데이터 서버로부터 수신한 메타데이터를 이용하여 처리하고자 하는 파일이 속한 오너의 복제본 저장 위치를 확인하는 복제본 위치 확인부; 및상기 복제본이 저장된 데이터 서버에 파일 연산을 요청하여 파일 연산 결과를 수신하는 파일 연산 요청부를 포함하고,상기 오너는,상기 파일의 디렉토리에 기초하여 결정되는 것을 특징으로 하는 클라이언트 서버.
- 제17항에 있어서,상기 복제본 위치 확인부는,상기 메타데이터 서버로부터 오너 식별자에 대응하는 메타데이터의 트리를 캐싱함으로써 메타데이터를 수신하는 것을 특징으로 하는 클라이언트 서버.
- 메타데이터 서버에 소정의 오너에 대한 메타데이터를 요청하는 단계;상기 요청한 메타데이터를 수신하여 상기 오너의 복제본이 저장된 데이터 서버를 확인하는 단계;상기 데이터 서버에 상기 오너에 속한 파일의 연산을 요청하는 단계; 및상기 파일에 대한 연산 결과를 상기 데이터 서버로부터 수신하는 단계;를 포함하고,상기 오너는,상기 파일의 디렉토리에 기초하여 결정되는 것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항에 있어서,상기 데이터 서버는,오너 단위에 따라 파일을 그룹화하여 상기 오너 별 복제본을 저장하는 것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항에 있어서,상기 메타데이터 서버는,오너 별 복제본의 저장 위치 정보인 메타데이터를 저장하는 것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항에 있어서,상기 데이터 서버에 상기 오너에 속한 파일의 연산을 요청하는 단계는,상기 파일의 연산이 쓰기 연산인 경우, 상기 오너의 복제본이 저장된 데이터 서버에 대해 직렬 호출 방식 또는 병렬 호출 방식으로 파일의 연산 요청을 하는 것을 특징으로 하는 분산 파일 시스템을 이용한 파일 연산 방법.
- 제19항 내지 제22항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록 매체.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080048781A KR101009149B1 (ko) | 2008-05-26 | 2008-05-26 | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080048781A KR101009149B1 (ko) | 2008-05-26 | 2008-05-26 | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090122801A true KR20090122801A (ko) | 2009-12-01 |
KR101009149B1 KR101009149B1 (ko) | 2011-01-18 |
Family
ID=41685240
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080048781A KR101009149B1 (ko) | 2008-05-26 | 2008-05-26 | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101009149B1 (ko) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120045239A (ko) * | 2010-10-29 | 2012-05-09 | 에스케이 텔레콤주식회사 | 메타 데이터 서버, 서비스 서버, 비대칭 분산 파일 시스템 및 그 운용 방법 |
KR101943570B1 (ko) * | 2018-03-28 | 2019-01-30 | 주식회사 리얼타임테크 | 분산 데이터베이스 시스템에서의 대용량 이동객체 데이터에 대한 분산처리 방법 |
KR20190081670A (ko) * | 2017-12-29 | 2019-07-09 | (주)터보소프트 | 분산 처리 기반 공간 웹 객체 검색 시스템 및 이를 이용한 분산 처리 기반 공간 웹 객체 검색 방법 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100423701B1 (ko) * | 2001-02-08 | 2004-03-18 | 주식회사 클래러스 | 가상적으로 통합된 분산파일그룹에 데이터를 백업하기위한 방법 및 시스템 |
KR100749922B1 (ko) * | 2004-12-14 | 2007-08-21 | 한국전자통신연구원 | 객체 기반 스토리지를 사용하는 분산 파일 서버에서 장애복구 시스템 및 방법 |
KR100956637B1 (ko) * | 2007-12-07 | 2010-05-11 | 한국전자통신연구원 | 분산파일 시스템에서의 비동기식 데이터 복제 방법 및 그에따른 분산파일 시스템 |
KR101078287B1 (ko) * | 2007-12-14 | 2011-10-31 | 한국전자통신연구원 | 다중 복제를 지원하는 분산 파일 시스템에서 데이터 서버의복구 방법 및 그에 적당한 메타데이터 스토리지 및 저장방법 |
-
2008
- 2008-05-26 KR KR1020080048781A patent/KR101009149B1/ko active IP Right Grant
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120045239A (ko) * | 2010-10-29 | 2012-05-09 | 에스케이 텔레콤주식회사 | 메타 데이터 서버, 서비스 서버, 비대칭 분산 파일 시스템 및 그 운용 방법 |
KR20190081670A (ko) * | 2017-12-29 | 2019-07-09 | (주)터보소프트 | 분산 처리 기반 공간 웹 객체 검색 시스템 및 이를 이용한 분산 처리 기반 공간 웹 객체 검색 방법 |
KR101943570B1 (ko) * | 2018-03-28 | 2019-01-30 | 주식회사 리얼타임테크 | 분산 데이터베이스 시스템에서의 대용량 이동객체 데이터에 대한 분산처리 방법 |
Also Published As
Publication number | Publication date |
---|---|
KR101009149B1 (ko) | 2011-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10853339B2 (en) | Peer to peer ownership negotiation | |
US10698773B2 (en) | Replicating a source data set to a target data store | |
US10339017B2 (en) | Methods and systems for using a write cache in a storage system | |
US9436720B2 (en) | Safety for volume operations | |
US8930648B1 (en) | Distributed deduplication using global chunk data structure and epochs | |
US11010078B2 (en) | Inline deduplication | |
US9274716B2 (en) | Systems and methods for hierarchical reference counting via sibling trees | |
CN102594849B (zh) | 数据备份、恢复方法、虚拟机快照删除、回滚方法及装置 | |
US20120191675A1 (en) | Device and method for eliminating file duplication in a distributed storage system | |
EP4241166A1 (en) | Data connector component for implementing data requests | |
WO2019184012A1 (zh) | 数据写入方法、客户端服务器和系统 | |
US7640588B2 (en) | Data processing system and method | |
US20140181036A1 (en) | Log consolidation | |
US20170199891A1 (en) | Distributed data deduplication in a grid of processors | |
US20160048529A1 (en) | Coalescing storage operations | |
KR101009149B1 (ko) | 오너 단위의 파일 그룹화를 이용한 분산 파일 시스템 및파일 연산 방법 | |
CN111399760A (zh) | Nas集群元数据处理方法、装置、nas网关及介质 | |
US10713216B2 (en) | Using relative generation numbers to deduplicate file system events | |
WO2023197937A1 (zh) | 数据处理方法及其装置、存储介质、计算机程序产品 | |
US20230350760A1 (en) | Physical size api for snapshots backed up to object store | |
US20200371849A1 (en) | Systems and methods for efficient management of advanced functions in software defined storage systems | |
KR20200101594A (ko) | 분산 파일 시스템에서 클라이언트 기반의 실시간 데이터 복구에 기반한 디코딩 처리 방법 및 이를 위한 장치 | |
US20240054056A1 (en) | Recovery mechanism with selective ordering and concurrent operations | |
CN1813253A (zh) | 对共享的只读文件系统中的病毒的检测和报警 | |
KR100988107B1 (ko) | 분산 파일 시스템 및 복제본 상태 매칭을 이용한 파일일관성 관리 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
N231 | Notification of change of applicant | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20131231 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20151223 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20170102 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20180102 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20190102 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20200102 Year of fee payment: 10 |