KR19980703329A - 실시간 데이터 이송 시스템 및 스파스 파일을 적용하기 위한방법 - Google Patents

실시간 데이터 이송 시스템 및 스파스 파일을 적용하기 위한방법 Download PDF

Info

Publication number
KR19980703329A
KR19980703329A KR1019970706734A KR19970706734A KR19980703329A KR 19980703329 A KR19980703329 A KR 19980703329A KR 1019970706734 A KR1019970706734 A KR 1019970706734A KR 19970706734 A KR19970706734 A KR 19970706734A KR 19980703329 A KR19980703329 A KR 19980703329A
Authority
KR
South Korea
Prior art keywords
file
data file
transfer
size
storage device
Prior art date
Application number
KR1019970706734A
Other languages
English (en)
Other versions
KR100446339B1 (ko
Inventor
와이퉁람
Original Assignee
스티븐 엠. 워긴
체옌네소프트웨어인코오포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 스티븐 엠. 워긴, 체옌네소프트웨어인코오포레이티드 filed Critical 스티븐 엠. 워긴
Publication of KR19980703329A publication Critical patent/KR19980703329A/ko
Application granted granted Critical
Publication of KR100446339B1 publication Critical patent/KR100446339B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/185—Hierarchical storage management [HSM] systems, e.g. file migration or policies thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99951—File or database maintenance
    • Y10S707/99952—Coherency, e.g. same view to multiple users
    • Y10S707/99953—Recoverability
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99951—File or database maintenance
    • Y10S707/99952—Coherency, e.g. same view to multiple users
    • Y10S707/99955—Archiving or backup

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Traffic Control Systems (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Communication Control (AREA)
  • Storage Device Security (AREA)

Abstract

통신망 컴퓨터 시스템(1)에서의 실시간 데이터 이송에 대한 시스템과 그 동작 방법은 이송된 파일을 나타내는 잘알려진 동작 시스템 특징인 스파스 파일(4C)을 이용한다. 스파스 파일은 파일 서버(10)에서 최소의 양 만큼의 물리적인 공간을 차지하지만, 동일한 사이즈를 갖는 것으로서 정의되고, 최초 파일로서 간주하게 된다. 사용자가 이송된 파일을 억세스할 경우, 파일은 파일 서버에 잔존하게 되며, 계층적인 저장 처리 시스템(20,30)에서 최적화된 저장 위치로 부터 자동적이며, 평이하게 파일 서버로 복귀된다.

Description

실시간 데이터 이송 시스템 및 스파스 파일을 적용하기 위한 방법
서버에 기초한 데이터 이송 관리 시스템은 기본적인 사무실 장비가 되었으며, 이에 대한 데이터 관리의 필요성이 점차 빠르게 증대되고 있다. 최근에, 많은 직장인들은 근거리 통신망(LAN)을 통해, 다른 컴퓨터와 접속된 개인용 컴퓨터(PC) 또는 워크스테이션을 갖고 있다.
일반적으로, LAN은 메인 메모리 및/또는 프린터와 같은 자원과 데이터를 함께 공유하도록 접속된 컴퓨터 워크스테이션과 같은 복수개의 컴퓨터 시스템을 포함한다. LAN은 종종 통신망 서비스를 제공하는 파일 서버(file sever)를 포함한다. 파일 서버는 일반적으로 컴퓨터 통신망상의 컴퓨터와 같은 노드(node)이며, 공유된 자원을 통해, 통신망상의 컴퓨터 단말기에 서비스를 제공한다. 예를들어, 파일 서버는 한 세트 단위의 스토리지 디스크를 처리할 수 있으며, 자체에 디스크를 갖고 있지 않거나, 외부적으로 저장할 필요가 있는 데이터를 갖는 통신망상의 컴퓨터 단말기에 스토리지 및 기록 보관 서비스를 제공할 수 있다.
LAN 에 대한 스토리지의 필요성은 천천히 증대하고 있다. 최근에, 다수의 서버들은 기가 바이트급의 데이터를 관리하고 있다. 게다가, 데이터를 저장하고 보호하는 기능은 많은 통신망 사용자들에게 큰 관심이 되고 있다. 데이터를 보호하기 위한 통상적인 방법에는 한 위치보다는 여러 위치에서 데이터를 유지하는 방법이 있다. ARC 서브(상표명) 데이터 관리 시스템과 같은 서버에 기초한 데이터 관리 시스템은 LAN 파일 서버 및/또는 LAN 에 접속된 컴퓨터 시스템상에서의 백업 기능 및 저장된 데이터의 보호 기능을 제공한다.
하지만, 컴퓨터 통신망으로 부터 제공된 데이터를 단순히 저장 및 백업하는 기능만으로는 충분하지 못하다. 특히, 통신망 사용자에게 있어 데이터를 외부적으로 저장하는 기능은 자동화, 최적화 및 평이하게 동작되는 것을 필요로 한다. 컴퓨터 통신망으로 부터 제공된 데이터를 외부적으로 효과적이게 저장하는 기능을 제공하는 하나의 기술은 계층적 스토리지 관리(HSM) 방법이 있다.
HSM은 제2 계층 및 가능한한 제3 계층의 스토리지 장치내의 파일 서버에 외부의 컴퓨터 통신망 데이터를 저장하는 기능을 포함한다. 일반적으로, 외부 스토리지 장치는 일회 기입 가능한 광학 장치, 재 기입 가능한 광학 장치 및 자기 테이프와 같은 높은 저장 용량을 갖는 스토리지 장치가 있다. 예를들어, 광학 스토리지 장치 및 자기 테이프 드라이브는 각각 제2 및 제3 스토리지 장치로서 파일 서버에 접속될 수 있다. HSM 장치에 의해 구현된 기준에 기초하여, 파일 서버에 저장된 데이터는 광학 스토리지 장치로 이송될 수 있고, 선택 가능한 기준에 따라, 테이프 드라이브에 이송될 수 있다.
예를들어, 데이터 이용에 대한 주파수는 데이터를 파일 서버로 부터 제2 및 제3 스토리지 장치에 이송하기 위한 기준으로서 작용될 수 있다. 자주 이용되지 않고 자주 억세스 되지 않는 데이터를 이송함으로써, 사용자가 파일 서버상에 남아있는 파일을 계속하여 검색할 동안에도, 파일 서버상의 공간은 충분해질 수 있다. 여기서, 이송이란 파일 서버로 부터 스토리지 계층(예컨대, 외부 스토리지 장치)으로의 이동을 의미한다. 역이송이란 스토리지 계층으로 부터 파일 서버로 데이터를 복구하는 것을 의미한다.
HSM 장치의 최적의 잇점을 획득하기 위해, 제2 스토리지 및 제3 스토리지 장치는 데이터 저장용으로서 계층적인 배열로 정렬된다. 따라서, 미리 설정된 주기의 시간 동안 통신망 파일 서버상에 잔존하는 데이터 파일은 초기에 광학 스토리지 장치에 이송될 수 있으며, 이 스토리지 광학 장치는 통신망 파일 서버에 의해 파일이 요구되었을 때, 상대적으로 빠른 응답 시간을 제공한다. 만일, 파일 서버에 의해 요구되지 않은 상태에서, 미리 설정된 주기의 시간 동안 광학 스토리지 장치상에 데이터 파일이 잔존한다면, 이 데이터 파일은, 스토리지 계층에 따라, 광학 스토리지 장치에 비해 상대적으로 느린 응답 시간을 갖는 자기 테이프 스토리지 장치로 이송될 수 있다. 그러므로, 계층적 스토리지 관리 시스템은 스토리지 장치의 계층에 대한 저장 용량과 가격, 속도에 기초한 통신망 시스템의 데이터 파일을 저장할 수 있는 보다 효과적인 방법을 제공한다.
파일이 파일 서버로 부터 이송될 경우, 최초 파일(original file)은 팬텀 파일(phantom file) 또는 톰스톤 파일(tombstone file)과 관련된 스터브 파일(stub file)로서 파일 서버상에 나타난다. 스터브 파일은 물리적으로 최소한의 할당된 공간을 이용하는 최초 파일을 의미하며, 파일 서버상에서 가능한 많은 공간을 충분하게 이용 가능하게 한다. 하지만, 스터브 파일은 또 파일 사이즈, 데이터 생성, 독출 전용 파일과 같은 데이터의 지속적인 억세스 및 특정한 기여와 같은 최초 파일과 밀접한 성질을 나타낸다. 하지만, 이송을 행하는 특정 HSM 실시예에 따를 경우에, 파일 사이즈는 최초 파일과 정확하게 일치하지 않는다. 파일 서버에 잔존하는 스터브 파일은 최초 파일의 실제 사이즈에 무관한 0.422 또는 1000 바이트의 사이즈를 갖는다. 예컨대, 100 메가 바이트 파일이 통신망 파일 서보로 부터 외부 저장 장치로 이송될 수 있고, 일반적으로 파일 서버에 남아있는 스터브 파일은 0.422 또는 1000 바이트의 사이즈를 갖게 될 것이다.
그러므로, 알려진 이송 실행은 이송된 파일을 의미하는 스터브 파일의 이용을 통해, 파일 서버의 물리적인 공간 할당을 줄일 수 있지만, 알려진 이송 방법은 최초 파일의 실제의 성질과 정확하게 일치하는 것은 아니다. 표시(representati on)의 정확성, 특히 최초 파일의 사이즈는 파일 사이즈가 이용되는 임의의 소프트웨어 장치에 대하여 중요한 정보가 된다. 예를들어, 일부의 LAN 소프트웨어 장치는 파일 서버에 의해 점유된 데이터의 양에 대해 통계적인 분석 기능을 제공하려 하며, 미리 설정된 값에 이르는 특정 파일 사이즈에 기초한 어떤 관행적 기능을 행하려 한다. 만일 이송된 파일들이 정확하게 나타나지 않는다면, 그 분석 및 관행적 기능이 적절히 행해질 수 없게 된다. 게다가, 예를들어 DOS(상표명) 동작 시스템의 DIR 명령은 사용자에게 잘못된 파일 사이즈를 제공할 수 있으며, 실제의 파일 사이즈 이상으로 되어 사용자를 당황하게 할 수 있다. 이와 유사하게, DOS(상표명) 동작 시스템의 COPY 명령은 실제적으로 2 메가바이트인 이송된 파일에 대해 1000 바이트 사이즈를 나타나게 할 수 있으므로, 이는 사용자로 하여금 용량에 비해 너무 작은 플로피 디스크로 해당 파일을 복사하게 한다.
일반적으로 HSM 실행은 특정 LAN 동작 시스템에 대해 맞추어지게 된다. 예를들어, NOVELL(상표명) NetWare(상표명) 동작 시스템은 많은 LAN 시스템에서 이용된다. 다양한 버전의 NetWare(상표명) 동작 시스템이 존재하며, 3.× 및 4.× 버전을 포함한다.
예를들어, 4.× 의 NetWare(상표명) 동작 시스템 버전에서, 실시간 데이터 이송(RTDM) 특성이 포함된다. 이러한 특성을 이용하면, NetWare(상표명) 파일 서버내의 파일 내용(예컨대, NetWare(상표명) 동작 시스템을 가동하는 파일 서버)은 파일 서버내에서 남아있는 이송된 파일을 나타내는 파일 디렉토리 엔트리를 갖는 제2 스토리지 장치에 이송될 수 있다. 파일 디렉토리 엔트리는 빈공간이므로 NetWare(상표명) 파일 서버내의 물리적인 공간을 차지하지 않을 것이다. 게다가, 파일 디렉토리 엔트리는 이송된 파일의 실제 사이즈를 포함하는 이송된 파일의 정확한 성질을 나타낼 것이다. 파일 서버에 의해 이송된 파일이 요구되면, 파일은 자동적으로 파일 서버로 복구된다.
그러므로, NetWare(상표명) 동작 시스템 버전 4.× RTDM은 자동적이며, 분명하게 파일을 NetWare(상표명) 볼륨으로 부터 제2 스토리지로의 이동 동작을 제공하며, 이때 이송된 파일에 대해 최초 NetWare(상표명) 볼륨내의 정확한 디렉토리 엔트리를 유지한다. 한편, 예를들어, NetWare(상표명) 동작 시스템 버전 3.×는 이송 기능을 제공하지 않는다. 따라서, 소프트웨어 판매자는 NetWare(상표명) 동작 시스템 버전 3.× 파일 서버용의 데이터 이송 기능을 제조하여야만 한다. 하지만, 알려진 이송 장치는 이송된 파일의 정확한 표시인 파일 서버상의 디렉토리 엔트리를 제공하지 않는다. 즉, 장치에 의존하면, 잔존하는 디렉토리 엔트리는 이송된 실제 사이즈와 다른 0.422 또는 1000 바이트 사이즈를 갖는 스터브 파일이 될 것이다.
따라서, 본 발명의 목적은 이송된 파일의 사이즈를 정확하게 표시하지 않는 스터브 파일의 이용을 제거하는 예컨대, NetWare(상표명) 버젼 3.× 파일 서버로 부터의 데이터 이송 방법을 제공함에 있다.
본 발명의 다른 목적은 사용자에게 절대적으로 분명한 파일 이송 및 역이송 방법을 제공함에 있다.
본 발명은 통신망 컴퓨터 시스템에서 계층적인 스토리지 관리 시스템 및 그 관리 방법에 관한 것으로, 특히 본 발명은 데이터를 자동적이며, 평이하게 파일 서버로 부터 보조의 스토리지 장치로 이송하기 위한 방법에 관한 것이다.
도 1은 본 발명에 따른 계층적 스토리지 관리 시스템을 포함하는 근거리 통신망 시스템을 나타낸다.
도 2는 본 발명에 따른 스파스 파일을 포함하는 실시간 데이터 이송을 위한 방법을 설명하는 흐름도이다.
도 3은 본 발명에 따른 스파스 파일을 포함하는 실시간 데이터 역이송을 위한 본 발명에 의한 방법을 설명하는 흐름도이다.
도 4A는 논리 사이즈를 갖는 데이터 파일을 나타낸다.
도 4B는 도 4A에서 나타낸 파일의 종래의 스파스 파일 표시를 나타낸다.
도 4C는 본 발명에 따른 도 4A에서 나타낸 파일의 스파스 파일 표시를 나타낸다.
본 발명의 따른 시스템 및 방법은 이송된 파일을 표시하는 알려진 동작 시스템 특징 즉, 스파스 파일(sparse file)을 이용하는 것이다. 스파스 파일은 논리적 또는 외관상의 사이즈 보다 작은 물리적 사이즈(예컨대, 물리적 할당)를 갖는 파일이다. 그러므로, 스파스 파일은 생성된 데이터 및 사이즈와 같은 실제의 파일 성질을 보유하고 있는 동안에 파일에 의해 점유된 물리적 공간을 최소화 하게 한다. 또 스파스 파일은 최초 파일의 모든 데이터 블록들을 제거하며, 최초 파일과 동일한 파일 사이즈를 가지므로, 필수적으로 물리적인 공간을 점유하지 않고서도, 최초 파일을 정확하게 표시한다.
본 발명의 시스템 및 방법에 따르면, 파일이 파일 서버로 부터 스토리지 매체로 이송될 경우, 이송된 파일은 최초 파일로서 기여하고, 최초 파일과 동일한 논리 사이즈를 갖는 것으로 정의된 스파스 파일을 갖는 파일 서버로 재위치된다. 하지만, 스파스 파일은 오직 하나의 데이터 블록과 같은 파일을 저장하는데 필요한 최소양의 공간을 점유한다. 이송 키 정보는 스파스 파일내에 저장되어, 파일 서버는, 사용자에 의해 억세스될 경우, 이송된 파일을 복구할 수 있다. 사용자가 이송된 파일을 억세스할 경우, 이 파일은 파일의 실제 성질을 갖는 파일 서버상에 잔존하는 것처럼 여겨지고, 제2 또는 제3 스토리지 매체로 부터 파일 서버로 자동적이며, 분명하게 복구된다. 그러므로, 본 발명에 따른 계층적인 스토리지 관리 방법은 이송된 파일을 표시하는데 있어 미리 설정되고 비정확한 사이즈를 갖는 스터브 파일의 이용을 배제한다.
도 1은 본 발명에 따른 HSM 시스템(2)을 포함하는 LAN 시스템을 설명한다. HSM 시스템(2)은 NetWare(상표명) 동작 시스템 버젼 3.× 주위에 예컨대, HSM 기능을 제공하며, 파일 서버(10)를 포함하며, 제2 스토리지 장치(20)에 접속된 제1 스토리지 장치이다. 제2 스토리지 장치(20)는 제3 스토리지 장치(30)에 다시 접속된다. 파일 서버(10)의 최적의 이용에 의해, 제2 스토리지 장치(20)와 제3 스토리지 장치(30), HSM 시스템(2)은 자동적이게 되며, 계층적으로 예컨대 기가바이트의 데이터를 저장할 수 있다.
LAN 시스템(1)은 예컨대, 클라이언트-서버(client-sever) 구성을 갖는다. 예컨대, 클라이언트는 파일 서버(10)에 접속된 복수개의 워크스테이션(40)이다. 워크스테이션(40)은 컴퓨터 시스템에 기초한 마이크로프로세서이다. 워크스테이션(40)중의 적어도 하나는 사용자에게 인터페이스를 제공하여, 파일 서버(10)로 부터의 데이터 이송을 위한 이송 기준을 구현하게 한다. 서버 쪽은 파일 서버(10)로 부터 분명한 이송 서비스를 제공하며, 파일 서버(10)에 서비스를 역이송 서비스를 제공하는 이송 엔진(11)을 갖는 파일 서버(10)를 포함한다.
이송 엔진(11)은 예컨대, 미리 정의된 기준에 따라 비활성 파일을 식별하고, 주기적으로 가동시킨다. 일단 파일이 이송용으로 식별되면, 이 파일은 HSM 시스템(2)의 스토리지 계층으로 이송되어, 파일 서버(10)상에 활성 파일에 대해 추가의 저장 공간이 생기게 한다. 이후 HSM 시스템(2)은 스토리지 계층의 최하위 레벨이 도달할때까지, 스토리지 계층 내의 이송을 위한 이송된 파일들을 관리한다.
도 1에 나타난 바와 같이, 서버 쪽은 예컨대, 3개의 개별 모듈을 포함한다. 제1 모듈은 파일 서버(10)이며, 이 모듈로 부터 자주 억세스하지 않는 파일과 같은 미리 선택된 파일을 저가의 스토리지 장치로 이동하는 것이 바람직하게 된다. 제2 모듈은 광학 스토리지 장치를 보조하는 광학 스테이지와 같은 제2 스토리지 장치(20)이다. 광학 스테이지는 파일 서버(10)로서, 동일하거나 개별적인 NetWare(상표명) 동작 시스템 서버가 될 수 있다. 제3 모듈은 테이프 변환기를 보조하는 테이프 스테이지와 같은 제3 스토리지 장치(30)이다. 제3 스테이지는 파일 서버(10) 또는 광학 스테이지(20)로서, 동일하거나 개별적인 NetWare(상표명) 동작 시스템 서버가 될 수 있다. 제2 및 제3 모듈은 스토리지 계층을 함께 형성한다. 일반적으로, 스토리지 계층에서 각 스테이지는 스토리지 매체의 균일한 집합으로서 예컨대, 스테이지내의 모든 매체는 동일한 물리적 성질을 갖는다. 스테이지 사이의 통신은 네이티브 NetWare(상표명) 동작 시스템 통신 프로토콜 예컨대, IPX,SPX,TLI 또는 TCP/IP을 통해 행해진다. 도 1에서 나타낸 제2 스토리지 장치(20) 및 제3 스토리지 장치(30)에 부가하여, 추가의 스토리지 스테이지가 HSM 시스템에 부가될 수 있다.
일반적으로, 재기입 가능한 광학 장치와 같은 광학 스토리지 장치(20)는 5∼10 초 범위의 억세스 시간을 가지며, 탈착 가능하고, 억세스 되기 이전에 항상 드라이브 및 스핀업시켜야 할 필요가 있다. 광학 스토리지의 자동 동작을 위해 쥬크박스(jukebox)가 이용될 수 있다. 이와 달리, 작동자는 매체의 로드 요구를 수동적으로 행할 수 있다. 휴렛-팻커드 8㎜ 테이프 드라이브와 같은 테이프 스토리지 장치(30)는 수분의 억세스 시간을 가지며, 탈착 가능하고, 억세스 되기 이전에 항상 드라이브 및 스핀업시켜야 할 필요가 있다. 테이프 스토리지의 자동 동작을 위해 자동변환기(autochanger)가 이용될 수 있다. 이와 달리, 작동자는 매체의 로드 요구를 수동적으로 행할 수 있다.
도 1에서 나타낸 전형적인 스토리지 계층에서의 각 스테이지는 각각의 스테이지 이송기(21,31)를 통해 제어된다. 예컨대, 스테이지 이송기(21,31)는 파일 서버(10) 또는 개별적인 파일 서버상에 있는 소프트웨어 프로그램을 포함한다. 스테이지 이송기(21,31)는 파일 서버상에 위치되며, 그 각각은 제2 스토리지 장치(20)와 제3 스토리지 장치(30)에 접속된다. 도 1에 나타낸 바와 같이, 스테이지 이송기(21)는 파일 서버(15)내에 위치되며, 스테이지 이송기(31)는 파일 서버(16)에 위치된다. 예컨대, 각각의 스테이지 이송기(21,31)는 이송된 파일을 관리하며, 요구(request)상의 파일들을 복구하고, 스토리지 계층의 규칙에 따라 스토리지 계층내에서 다음의 스테이지로 파일들을 이송하는 역할을 한다. 스토리지 계층의 각 스테이지는 스테이지 이송기를 갖고 있기 때문에, 스토리지 계층은 구분되며, 이는 결국 파일 서버(15,16)를 통해 파일 서버(10)상의 처리 로드를 감소하게 한다.
LAN 시스템(1)의 사용자는 수용가능한 제한 범위내에서 파일 서버(10)상의 디스크 스토리지를 유지하도록 주기적으로 실행하여, 전체의 파일 서버(10)에 대하여 시스템 이송 작업을 행할 수 있다. 또한, 사용자는 역이송 작업 또는 주문형 ad hoc 이송을 행할 수 있는 능력을 갖는다. 하지만, 임의의 파일 서버(10)로 부터 제공된 전체 파일은 동일한 스토리지 계층으로 이송해야만 한다.
시스템 이송 작업, 즉 파일 서버(10)로 부터 데이터의 이송 작업에 있어서, 사용자는 이송 해야할 파일/디렉토리를 지정해야할 필요가 있다. 이 선택 과정은 다양한 기준에 따라 사용자 임의로 채택될 수 있다. 예컨대, 데이터 이송에 대한 가변 변수는 날짜 가변, 즉 미리 설정된 필터 또는 특정 장치의 스토리지 가용성에 기초한 워터마크(water mark)를 포함할 수 있다.
날짜 가변 변수는 예컨대, 파일의 생성 날짜 또는 파일이 최후에 업데이트된 날짜에 기초로 하여, 파일 서버(10)로 부터의 파일 이송을 제공한다. 미리 설정된 필터 가변 변수는 예컨대, 파일명에 대한 패턴 일치, 파일의 기여(예컨대, 시스템 파일, 독출 전용 파일) 또는 미리 설정된 파일 사이즈에 기초로 하여, 파일 서버(10)으로 부터의 파일 이송을 제공한다. 워터마크 가변 변수는 특정 스토리지 장치에 대한 이용가능한 스토리지 공간의 양에 기초로 하여, 파일 서버(10)로 부터의 파일 이송을 제공한다.
예컨대, 워터마크 변수를 이용함으로써, HSM 시스템(2)은 파일 서버(10)에 대하여 이용가능한 스토리지 공간이 임계 워터 마크에 도달될 경우에, 파일 서버(10)으로 부터 제2 스토리지(20)으로 파일을 이송할 수 있으며, 그 임계 워터 마크점에서 긴급 이송은 볼륨 풀(volumn full) 상태를 피하기 위해, 미리 설정된 이송 기준에 따라 즉각 발생하게 할 수 있다. 이후의 파일은 이용가능한 스토리지 공간이 하이 워터마크(예컨대, 안전 레벨)에 도달할때 까지 이송될 수 있다. 하이 워터마크는 예컨대, 파일 서버(10)상에서의 이용가능한 공간의 백분율로 정의될 수 있다. 이용가능한 공간이 임계 워터마크 이하에 있으며, 하이 워터마크 상에 있을 경우, 파일들은 미리 설정된 시간 예컨대, 로우 워터마크가 도달할때 까지 가장 최근에 억세스된 시간을 기초로 하여 이송된다. 또한, 로우 워터마크는 예컨대, 파일 서버(10)상에 이용된 공간의 백분율로서 정의된다. 이용된 공간이 로우 워터마크 이하에 있을 경우, 파일 서버(10)으로 부터의 이송은 발생하지 않는다.
파일 서버(10)으로 부터의 이송된 파일을 식별하기 위한 변수는 사용자에 의해 원하는 만큼 조합될 수 있다. 사용자가 시스템 이송 작업을 고정할 경우에, 또한 사용자는 제2 스토리지 장치(20)로 부터 제3 스토리지 장치(30)로에 대한 추가의 이송 작업을 행하는지의 여부를 확정할 수 있다. 게다가, 사용자는 추가의 이송 작업이 행하기 전에 이송된 파일이 스토리지 장치내에 잔존해야하는 시간 주기를 확정 할 수 있다.
파일 서버(10)상에 잔존하는 파일이 HSM 시스템(2)의 스토리지 계층으로의 이송으로서 확정될 경우, 도 2의 동작 흐름도에 의해 설명된 본 발명에 따른 방법으로 실행된다. 도 2에 도시한 바와 같이, 이송 엔진(11)이 파일 서버(10)로 부터의 파일 이송에 대한 명령을 발생하면, 단계 S0 에서 처리 과정은 개시된다. 단계 S1 에서, 이송된 파일은 개방되고, 해당 파일은 단계 S2 에서 독출된다. 단계 S3 에서, 이송된 파일의 데이터 블록의 카피(copy)가 제2 스토리지 장치(20)로 전송된다. 스테이지 이송기(21)는 이송 키(migration key)를 이송된 파일의 위치를 가르키는 이송 엔진(11)으로 되돌아가게 한다. 일단 해당 파일이 제2 스토리지 장치(10)로 전송되었다면, 파일 서버(10)에 잔존하는 최초의 파일은 단계 S4 에서 절사(truncate)된다. 단계 S4 에서의 최초 파일의 절사는 최초 파일의 데이터 블록을 할당하지 않으므로, 데이터 블록은 파일 서버(10)에 의한 재할당에 대하여 이용가능하게 된다. 이러한 견지에서, 최초의 파일은 단계 S4 에서의 비할당으로 인해, 물리적인 할당 예컨대, 제로 데이터 블록을 갖는다. 게다가, 최초 파일의 실제 성질은 이송 엔진(11)에 의해 저장되고 있다. 단계 S5 에서, 이송 키는 최초 파일로 기입되며, 물리적 사이즈의 할당 예컨대 이송 키를 포함하는 한개의 데이터 블록을 갖는 스파스 파일이 된다. 따라서, 스파스 파일의 물리적 할당은 최초 파일의 국소 사이즈(local size) 보다 작게 된다. 단계 S6 에서, 이송 엔진(11)은 최초 파일의 실제 파일 사이즈와 동일한 국소 사이즈를 갖는 최초 파일을 정의하며, 이에 따라 한개 블록의 물리적 사이즈 할당을 갖는 스파스 파일을 생성하지만, 이 국소 사이즈는 최초의 파일 사이트(site)와 동일한 사이즈를 갖는다. 이송 처리 과정은 이송 엔진(11)이 이송 처리를 종료하는 단계 S7 에서 완성된다.
종래의 스파스 파일의 동작은 도 4A 및 4B에서 설명된다. n 데이터 블록(블록 0∼n)의 국소 사이즈를 갖는 파일 중 일부는 도 4A 에 도시한 데이터 예컨대, 데이터 블록 0, 4, 7,10 및 n 을 포함한다. 도 4B 에 도시한 파일은 스파스 파일로서, 도 4A 내의 파일을 나타낸다. 도 4B 의 파일은 물리적 사이즈 예컨대, 5개의 데이터 블록을 가지며, 도 4A 의 점유된 데이터 블록들만을 나타낸다. 결국, 스파스 파일은 국소 사이즈 보다 작은 물리적 사이즈를 갖는 파일을 생성하기 위한 방법을 제공하므로써, 파일 서버(10)상의 스토리지 공간의 소모를 방지할 수 있다.
도 4B 에 도시한 스파스 파일을 생성하기 위해, 컴퓨터 프로그래머가 전용 명령을 제공하면 LAN 시스템(1)의 동작 시스템에 의해 확인된 파일을 생성한다. 예컨대, Novell(상표명) Netware(상표명) 동작 시스템 버젼 3.×은 SEEK 어드레스들 사이의 데이터 블록을 할당하지 않도록 SEEK 명령을 해독한다. 이와 반대로, 다른 동작 시스템은 SEEK 어드레스들 사이에 있는 데이터 블록들을 할당하는 것으로서 SEEK 명령을 처리한다. 표 1에 나타낸 단계들은 전형적인 단계들로서, 도 4B 에서 설명된 스파스 파일을 생성하는데 이용될 수 있다.
a) 파일 개방
b) 데이터 블록 0 에 대하여 탐색
c) 데이터 블록 0 의 데이터를 기입
d) 데이터 블록 4 에 대하여 탐색
e) 데이터 블록 4 의 데이터를 기입
f) 데이터 블록 7 에 대하여 탐색
g) 데이터 블록 7 의 데이터를 기입
h) 데이터 블록 10 에 대하여 탐색
i) 데이터 블록 10 의 데이터를 기입
j) 데이터 블록 n 에 대하여 탐색
k) 데이터 블록 n 의 데이터를 기입
l) 파일 클로즈(close)
따라서, 표 1에 나타낸 단계들은 Novell(상표명) Netware(상표명) 동작 시스템 버젼 3.×에 의해 해독되어, 단지 기입될 데이터 블록들만을 할당하므로써, 0,4,7,10 및 n 상태로 점유된 데이터 블록들을 나타내는 5개의 데이터 블록을 갖는 스파스 파일을 생성한다. 이 스파스 파일은 사용자에 의해 억세스되기 전에만 그것의 실제 사이즈를 나타내며, 이 파일은 도 4A 에 도시한 형태 즉, 그것의 최초 사이즈와 동일한 사이즈로 할당된 물리적 사이즈를 갖는 형태로서 사용자에게 제공된다.
본 발명에 의해, 스파스 파일, 예컨대 Novell(상표명) Netware(상표명) 동작 시스템 버젼 3.× 스파스 파일 특징은 최초 파일의 점유된 데이터 블록들을 포함하지 않고, 파일 서버(10)로 부터 이송되었던 파일을 나타내는데 이용된다. 그러므로, 도 4C 에서 도시된 바와 같이, 단지 하나의 데이터 블록을 갖지만, 도 4A 에서 나타낸 실제 파일 사이즈와 동일한 국소 사이즈를 갖는 것으로 정의된 스파스 파일은 본 발명에 따른 방법에 의해 발생된다. 도 4C 에 나타낸 점선은 파일의 국소 사이즈를 가르키며, 이것에 의해 데이터 블록은 할당되지 않는다. 표 2는 도 4C 의 스파스 파일 생성에 대한 전형적인 단계들을 나타낸다.
a) 파일 개방
b) 이송 키 기입
c) 실제의 최초 파일 사이즈에 대하여 탐색
d) 0 기입
e) 파일 클로즈
본 발명에 의해, Novell(상표명) Netware(상표명) 동작 시스템의 스파스 파일 특징은 최초 파일의 실제 특성을 포함하는 동안, 파일 서버(10)상의 이송된 파일을 나타내는데 필요한 물리적 할당을 최소화하기 위해 이용된다. 따라서, 일단 최초의 파일이 카피되고, 제2 스토리지 장치(20)로 전송되고, 이후에 절사되었다면, 파일 서버에 잔존하는 파일은 표 2에서 설명한 전형적인 단계들에 의해 동작된다. 실제 파일 사이즈에 대한 SEEK 동작을 행하는 단계 b 는 최초 파일의 물리적 사이즈에 동일한 국소 사이즈를 갖는 스파스 파일을 정의한다. 하지만, 최초 파일의 비할당은 파일 서버(10)내의 스파스 파일에 의해 점유된 물리적 사이즈를 줄일 수 있게 한다.
표 2 에 나타낸 단계에 덧붙여, 본 발명에 따라 스파스 파일을 생성하는 전형적인 단계의 다른 세트를 표 3에서 나타낸다.
a) 파일 개방
b) 이송 키 기입
c) 실제의 최초 파일 사이즈에 대한 사이즈 변환
d) 파일 클로즈
사이즈 변환 동작에 의해 영향을 받게 되는 할당된 데이터 블록들이 없는 파일 서버(10)내의 후속하는 최초 파일의 비할당에 기인하여, 사이즈 변환 동작은 스파스 파일의 국소 사이즈를 정의하는데 이용될 수 있다. 따라서, 본 발명에 따른 방법은 알려진 동작 시스템 특징, 즉 이송된 파일의 실제 특성을 갖는 것으로서 정의되며 최소의 물리적 사이즈를 갖는 스파스 파일을 이용하여, 파일 서버(10)내의 이송된 파일을 나타내게 한다.
일단 파일이 파일 서버(10)로 부터 HSM 시스템(2)으로 이송되었다면, 파일은 파일 서버(10)에 역이송 동작을 통해 복구된다. 예컨대, 사용자가 이송된 파일을 억세스하며, 파일 서버(10)가 이송 엔진(11)을 통해 파일을 요구했을 때, 역이송 동작이 발생한다. 도 3에서 도시한 바와 같이, 역이송 처리 과정은 이송된 파일이 파일 서버(10)에 의해 요구된 경우, 단계 S10 에서 개시된다.
단계 S10A 에서, 이송 엔진(11)은 이송된 파일의 위치를 결정하기 위해, 스파스 파일 형태로 저장된 이송 키 정보를 독출한다. 단계 S10B 에서, 이송 엔진(11)은 이송 키를 스테이지 이송기(21)로 요구한다. 단계 S10C 에서 스테이지 이송기(21)는 요구된 파일이 제2 스토리지 장치(20)에 위치되었는지의 여부 또는 제3 스토리지 장치(30)로 추가 이송되었는지의 여부를 결정하기 위해 이송 키를 이용한다. 일단 파일이 위치 결정되면, 단계 S10D 에서, 파일은 이송 엔진(11)을 통해 파일 서버(10)에 전송된다. 단계 S11에서, 이송 엔진(11)은 요구된 파일의 데이터를 독출한다.
이송된 파일이 독출된 후에, 단계 S12에서 이송 엔진(11)에 의해 스파스 파일이 개방된다. 단계 S13 에서, HSM 시스템(2)으로 부터 복구된 최초 파일의 내용은 스파스 파일로 로딩되며, 이 스파스 파일은 다시 최초의 물리적 할당을 갖는 최초 파일로 변환된다. 그러므로, 단계 S13 에서, 최초 파일은 다시 최초(예컨대, 선이송)의 형태로 파일 서버(10)에 있게 된다. 게다가, 사용자는 파일 서버(10)상의 디렉토리 엔트리가 최초 파일의 실제 데이터를 포함하지 않고, 제한된 기술 정보(descriptive information)를 포함하는 사실상의 스파스 파일이 있었다는 사실을 인식하지 못한다. 더우기, 이송된 파일의 역이송 동작은 자동적이며, 사용자에게 평이하다.
단계 S14 에서, 예컨대, 스토리지 계층으로 부터 복구된 최초 파일의 카피(copy)가 단지 Novell(상표명) Netware(상표명) 동작 시스템 확장 구분(EA)내에 저장되기 때문이다. 이송 키 정보는 스파스 파일에 형식적으로 저장되며, 파일 서버(10)에 더이상 잔존하지 않고, 스토리지 계층에 존재하게 된다. 파일이 이미 외부 저장 장치에 저장되었기 때문에, 만일 복구된 파일이 변경되지 않고, 이후에 이송에 대하여 확정되면, 이전의 이송 키는 스토리지 계층으로의 불필요한 데이터 전송을 방지하는데 이용된다. 이러한 경우, 단지 스파스 파일만이 파일 서버(10)에 생성된다. 단계 S15 에서, 이송 엔진(11)은 역이송 처리 동작을 종료한다.

Claims (13)

  1. 통신망 컴퓨터 시스템에서 제1 실사이즈를 갖는 데이터 파일을 제1 스토리지 장치로 부터 제2 스토리지 장치로 이송하기 위한 방법에 있어서,
    상기 데이터 파일의 내용을 상기 제2 스토리지 장치로 전송하는 단계와,
    상기 데이터 파일을 절산하는 단계와,
    상기 제1 스토리지 장치내에 상기 제1 실사이즈 보다 작은 제1 실사이즈 및 제2 실사이즈와 겉보기에 동일한 사이즈를 갖는 스파스 파일을 발생하는 단계를 포함하는 것을 특징으로 하는 데이터 파일 이송 방법.
  2. 제1항에 있어서, 상기 데이터 파일 이송 방법은 미리 설정된 스토리지 계층 구조의 기능에 따라 상기 제2 스토리지 장치로 부터 상기 제3 스토리지 장치로 데이터를 이송하는 단계를 추가로 포함하는 것을 특징으로 하는 데이터 파일 이송 방법.
  3. 제1항에 있어서, 상기 통신망 컴퓨터 시스템은 Novell(상표명) Netware(상표명) 버젼 3.×동작 시스템을 포함하는 것을 특징으로 하는 데이터 파일 이송 방법.
  4. 제1항에 있어서, 데이터 파일 이송 방법은 상기 스파스 파일내에 이송 키를 저장하는 단계를 추가로 포함하는 것을 특징으로 하는 데이터 파일 이송 방법.
  5. 제1항에 있어서, 스파스 파일을 발생하는 단계는,
    데이터 파일에 개방 동작을 행하는 단계와,
    상기 데이터 파일에 제1 기입 동작을 행하는 단계와,
    상기 데이터 파일에 탐색 동작을 행하는 단계와,
    상기 데이터 파일에 제2 기입 동작을 행하는 단계와,
    상기 데이터 파일에 클로즈 동작을 행하는 단계를 추가로 포함하는 것을 특징으로 하는 데이터 파일 이송 방법.
  6. 제5항에 있어서, 상기 탐색 동작은 상기 제1 실데이터를 탐색하는 것임을 특징으로 하는 데이터 파일 이송 방법.
  7. 제5항에 있어서, 상기 제1 기입 동작은 이송 키를 상기 데이터 파일에 기입하는 것임을 특징으로 하는 데이터 파일 이송 방법.
  8. 제1항에 있어서, 상기 스파스 파일을 발생하는 단계는,
    상기 데이터 파일에 개방 동작을 행하는 단계와,
    상기 데이터 파일에 제1 기입 동작을 행하는 단계와,
    상기 데이터 파일에 사이즈 변환 동작을 행하는 단계와,
    상기 데이터 파일에 클로즈 동작을 행하는 단계를 추가로 포함하는 것을 특징으로 하는 데이터 파일 이송 방법.
  9. 제8항에 있어서, 상기 사이즈 변환 동작은 사이즈를 상기 제1 실사이즈로 변환하는 것임을 특징으로 하는 데이터 파일 이송 방법.
  10. 통신망 컴퓨터 시스템에서 제1 실사이즈를 갖는 데이터 파일을 제1 스토리지 장치로 부터 이송하기 위한 시스템에 있어서,
    상기 제1 스토리지 장치에 접속된 이송 엔진과,
    상기 이송 엔진에 접속된 제2 스토리지 장치를 포함하고,
    상기 이송 엔진은 상기 데이터 파일을 독출하며, 상기 데이터 파일의 내용들을 상기 제2 스토리지 장치로 전송하고, 상기 제1 스토리지 장치내에 상기 제1 실사이즈와 겉보기에 동일 사이즈를 가지며, 상기 제1 실사이즈 보다 작은 제2 실사이즈를 갖는 스파스 파일을 발생하는 것을 특징으로 하는 데이터 파일 이송 시스템.
  11. 제10항에 있어서, 상기 데이터 파일 이송 시스템은 미리 설정된 스토리지 계층 구조의 기능으로써, 추가의 데이터 파일 이송을 수신하는 상기 제2 스토리지 장치에 접속된 제3 스토리지 장치를 추가로 포함하는 것을 특징으로 하는 데이터 파일 이송 시스템.
  12. 제10항에 있어서, 상기 이송 엔진은 상기 스파스 파일내의 이송 키를 저장하는 기능을 갖는 것을 특징으로 하는 데이터 파일 이송 시스템.
  13. 제10항에 있어서, 상기 통신망 컴퓨터 시스템은 Novell(상표명) Netware(상표명) 버젼 3.×동작 시스템을 포함하는 것을 특징으로 하는 데이터 파일 이송 시스템.
KR1019970706734A 1995-03-29 1996-03-29 실시간데이터이송시스템및스파스파일을사용하는방법 KR100446339B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US08/413056 1995-03-29
US8/413,056 1995-03-29
US08/413,056 US5564037A (en) 1995-03-29 1995-03-29 Real time data migration system and method employing sparse files

Publications (2)

Publication Number Publication Date
KR19980703329A true KR19980703329A (ko) 1998-10-15
KR100446339B1 KR100446339B1 (ko) 2004-12-08

Family

ID=23635640

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970706734A KR100446339B1 (ko) 1995-03-29 1996-03-29 실시간데이터이송시스템및스파스파일을사용하는방법

Country Status (11)

Country Link
US (1) US5564037A (ko)
EP (1) EP0818006B1 (ko)
JP (1) JPH11511272A (ko)
KR (1) KR100446339B1 (ko)
CN (1) CN1079552C (ko)
AT (1) ATE328324T1 (ko)
AU (1) AU694022B2 (ko)
BR (1) BR9608000A (ko)
DE (1) DE69636192T2 (ko)
RU (1) RU2190248C2 (ko)
WO (1) WO1996030839A1 (ko)

Families Citing this family (145)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5909700A (en) * 1996-12-23 1999-06-01 Emc Corporation Back-up data storage facility incorporating filtering to select data items to be backed up
US5873103A (en) * 1994-02-25 1999-02-16 Kodak Limited Data storage management for network interconnected processors using transferrable placeholders
US5678044A (en) * 1995-06-02 1997-10-14 Electronic Data Systems Corporation System and method for improved rehosting of software systems
US5680640A (en) 1995-09-01 1997-10-21 Emc Corporation System for migrating data by selecting a first or second transfer means based on the status of a data element map initialized to a predetermined state
US5799324A (en) * 1996-05-10 1998-08-25 International Business Machines Corporation System and method for management of persistent data in a log-structured disk array
US5933653A (en) * 1996-05-31 1999-08-03 Emc Corporation Method and apparatus for mirroring data in a remote data storage system
US5835954A (en) * 1996-09-12 1998-11-10 International Business Machines Corporation Target DASD controlled data migration move
US6038665A (en) * 1996-12-03 2000-03-14 Fairbanks Systems Group System and method for backing up computer files over a wide area computer network
US5794254A (en) * 1996-12-03 1998-08-11 Fairbanks Systems Group Incremental computer file backup using a two-step comparison of first two characters in the block and a signature with pre-stored character and signature sets
US5822780A (en) * 1996-12-31 1998-10-13 Emc Corporation Method and apparatus for hierarchical storage management for data base management systems
JPH10224665A (ja) * 1997-02-04 1998-08-21 Sony Corp 送出システム
JP3734334B2 (ja) * 1997-05-07 2006-01-11 富士通株式会社 データ移行システム、データ移行用プログラムを格納したコンピュータ読み取り可能な記録媒体、及びデータ移行方法
US6366988B1 (en) * 1997-07-18 2002-04-02 Storactive, Inc. Systems and methods for electronic data storage management
US5983368A (en) * 1997-08-26 1999-11-09 International Business Machines Corporation Method and system for facilitating hierarchical storage management (HSM) testing
US6145068A (en) * 1997-09-16 2000-11-07 Phoenix Technologies Ltd. Data transfer to a non-volatile storage medium
US6704553B1 (en) * 1997-10-08 2004-03-09 Thomas M. Eubanks System and method for providing automatic tuning of a radio receiver and for providing automatic control of a CD/tape player
US6145066A (en) * 1997-11-14 2000-11-07 Amdahl Corporation Computer system with transparent data migration between storage volumes
US6105037A (en) * 1997-12-12 2000-08-15 International Business Machines Corporation Apparatus for performing automated reconcile control in a virtual tape system
US5953729A (en) 1997-12-23 1999-09-14 Microsoft Corporation Using sparse file technology to stage data that will then be stored in remote storage
US6088805A (en) * 1998-02-13 2000-07-11 International Business Machines Corporation Systems, methods and computer program products for authenticating client requests with client certificate information
EP0992913B1 (en) * 1998-04-27 2004-09-22 Sony Corporation Data recording/reproducing apparatus and method therefor
US6757705B1 (en) * 1998-08-14 2004-06-29 Microsoft Corporation Method and system for client-side caching
US6199194B1 (en) * 1998-09-25 2001-03-06 Adaptec, Inc. Method and system for programming firmware over a computer network
US6378128B1 (en) * 1998-10-08 2002-04-23 Microsoft Corporation System and method for dynamically modifying an install-set
US6442601B1 (en) * 1999-03-25 2002-08-27 International Business Machines Corporation System, method and program for migrating files retrieved from over a network to secondary storage
US7035880B1 (en) 1999-07-14 2006-04-25 Commvault Systems, Inc. Modular backup and retrieval system used in conjunction with a storage area network
US6938058B2 (en) * 1999-08-23 2005-08-30 Eisenworld, Inc. Apparatus and method for transferring information between platforms
GB0002019D0 (en) * 2000-01-29 2000-03-22 Ibm Data migration tool
US7434219B2 (en) 2000-01-31 2008-10-07 Commvault Systems, Inc. Storage of application specific profiles correlating to document versions
US6658436B2 (en) 2000-01-31 2003-12-02 Commvault Systems, Inc. Logical view and access to data managed by a modular data and storage management system
US7003641B2 (en) 2000-01-31 2006-02-21 Commvault Systems, Inc. Logical view with granular access to exchange data managed by a modular data and storage management system
US6795835B2 (en) * 2000-05-19 2004-09-21 Centerbeam, Inc. Migration of computer personalization information
US6952730B1 (en) * 2000-06-30 2005-10-04 Hewlett-Packard Development Company, L.P. System and method for efficient filtering of data set addresses in a web crawler
US6751635B1 (en) * 2000-08-18 2004-06-15 Network Appliance, Inc. File deletion and truncation using a zombie file space
US6981005B1 (en) * 2000-08-24 2005-12-27 Microsoft Corporation Partial migration of an object to another storage location in a computer system
EP1532543A4 (en) * 2000-09-11 2008-04-16 Agami Systems Inc STORAGE SYSTEM COMPRISING PARTITIONED METADATA THAT MIGRATE LIKELY
JP4627110B2 (ja) * 2000-10-16 2011-02-09 富士通株式会社 データ記憶装置
US7281010B2 (en) * 2000-11-15 2007-10-09 Lenovo (Singapore) Pte. Ltd. Trusted computing platform with dual key trees to support multiple public/private key systems
US7047420B2 (en) * 2001-01-17 2006-05-16 Microsoft Corporation Exclusive encryption
US6990667B2 (en) 2001-01-29 2006-01-24 Adaptec, Inc. Server-independent object positioning for load balancing drives and servers
US7043637B2 (en) 2001-03-21 2006-05-09 Microsoft Corporation On-disk file format for a serverless distributed file system
US6981138B2 (en) 2001-03-26 2005-12-27 Microsoft Corporation Encrypted key cache
US7062490B2 (en) * 2001-03-26 2006-06-13 Microsoft Corporation Serverless distributed file system
US6988124B2 (en) 2001-06-06 2006-01-17 Microsoft Corporation Locating potentially identical objects across multiple computers based on stochastic partitioning of workload
US7546354B1 (en) * 2001-07-06 2009-06-09 Emc Corporation Dynamic network based storage with high availability
US8640136B2 (en) * 2001-09-26 2014-01-28 Emc Corporation Sharing objects between computer systems
US8442957B2 (en) * 2001-09-26 2013-05-14 Emc Corporation Efficient management of large files
JP2005505039A (ja) * 2001-09-28 2005-02-17 コムヴォールト・システムズ・インコーポレーテッド 情報記憶装置にオブジェクトをアーカイブする装置及び方法
JP4176341B2 (ja) * 2001-10-23 2008-11-05 株式会社日立製作所 記憶制御装置
DE60112589T2 (de) * 2001-11-13 2006-06-22 Hitachi, Ltd. Rechnerdatenmigrationsvorrichtung und Verfahren dafür
JP4168626B2 (ja) * 2001-12-06 2008-10-22 株式会社日立製作所 記憶装置間のファイル移行方法
JP2003237914A (ja) * 2002-02-15 2003-08-27 Hitachi Ltd 記憶メディア保管システム及びその運用方法
DE10211606B4 (de) * 2002-03-12 2017-06-08 Kip Cr P1 Lp Datenverarbeitungseinrichtung mit einem Metadatensicherungsmanagement
US6964833B2 (en) * 2002-05-31 2005-11-15 Samsung Electronics Co., Ltd. Linked dihydrazone-based charge transport compounds
EP1514183A2 (en) 2002-06-20 2005-03-16 BRITISH TELECOMMUNICATIONS public limited company Distributed computer
US7937430B1 (en) * 2002-07-31 2011-05-03 At&T Intellectual Property I, L.P. System and method for collecting and transmitting data in a computer network
KR100457046B1 (ko) * 2002-08-07 2004-11-10 삼성전자주식회사 반도체 장치의 제조에서 콘택 형성 방법
ATE400026T1 (de) * 2002-09-10 2008-07-15 Exagrid Systems Inc Datenschutzverfahren und vorrichtung
GB0230331D0 (en) 2002-12-31 2003-02-05 British Telecomm Method and apparatus for operating a computer network
US6981117B2 (en) 2003-01-29 2005-12-27 International Business Machines Corporation Method, system, and program for transferring data
JP4267353B2 (ja) 2003-03-28 2009-05-27 株式会社日立製作所 データ移行支援システム、および、データ移行支援方法
JP2004318743A (ja) * 2003-04-21 2004-11-11 Hitachi Ltd ファイル移送装置
US7454569B2 (en) 2003-06-25 2008-11-18 Commvault Systems, Inc. Hierarchical system and method for performing storage operations in a computer network
WO2005022536A2 (en) * 2003-08-29 2005-03-10 Koninklijke Philips Electronics N.V. File migration history controls updating of pointers
US7734690B2 (en) * 2003-09-05 2010-06-08 Microsoft Corporation Method and apparatus for providing attributes of a collaboration system in an operating system folder-based file system
US7546324B2 (en) 2003-11-13 2009-06-09 Commvault Systems, Inc. Systems and methods for performing storage operations using network attached storage
JP2005165486A (ja) * 2003-12-01 2005-06-23 Sony Corp ファイル管理装置、ストレージ管理システム、ストレージ管理方法、プログラム及び記録媒体
US20050216532A1 (en) * 2004-03-24 2005-09-29 Lallier John C System and method for file migration
GB0412655D0 (en) * 2004-06-07 2004-07-07 British Telecomm Distributed storage network
JP2006079273A (ja) * 2004-09-08 2006-03-23 Sony Corp ファイル管理装置、ネットワークシステム、ファイル管理方法及びプログラム
JP4349301B2 (ja) * 2004-11-12 2009-10-21 日本電気株式会社 ストレージ管理システムと方法並びにプログラム
US20060136525A1 (en) * 2004-12-21 2006-06-22 Jens-Peter Akelbein Method, computer program product and mass storage device for dynamically managing a mass storage device
US7831639B1 (en) * 2004-12-22 2010-11-09 Symantec Operating Corporation System and method for providing data protection by using sparse files to represent images of data stored in block devices
US20060230136A1 (en) * 2005-04-12 2006-10-12 Kenneth Ma Intelligent auto-archiving
DE602006020709D1 (de) * 2005-04-20 2011-04-28 Axxana Israel Ltd Ferndaten-spiegelungssystem
US7853667B1 (en) * 2005-08-05 2010-12-14 Network Appliance, Inc. Emulation of transparent recall in a hierarchical storage management system
US7464114B2 (en) * 2005-09-27 2008-12-09 International Business Machines Corporation Method and apparatus to capture and transmit dense diagnostic data of a file system
US20070130232A1 (en) * 2005-11-22 2007-06-07 Therrien David G Method and apparatus for efficiently storing and managing historical versions and replicas of computer data files
JP4563314B2 (ja) * 2005-12-14 2010-10-13 富士通株式会社 ストレージシステム制御装置、ストレージシステム制御プログラム、ストレージシステム制御方法
US7552300B2 (en) * 2006-01-03 2009-06-23 International Business Machines Corporation Method for migrating objects in content management systems through exploitation of file properties, temporal locality, and spatial locality
JP4908849B2 (ja) * 2006-01-11 2012-04-04 富士通セミコンダクター株式会社 ファイル削除方法、ファイル・オープン方法、ファイル削除プログラム、および、ファイル・オープン・プログラム
US7543128B2 (en) * 2006-07-25 2009-06-02 Hewlett-Packard Development Company, L.P. Method and apparatus for repurposing compute resources to implement, or not implement, storage access protocols
US7734669B2 (en) 2006-12-22 2010-06-08 Commvault Systems, Inc. Managing copies of data
US8738588B2 (en) * 2007-03-26 2014-05-27 International Business Machines Corporation Sequential media reclamation and replication
US7720819B2 (en) * 2007-04-12 2010-05-18 International Business Machines Corporation Method and apparatus combining revision based and time based file data protection
JP4375435B2 (ja) * 2007-05-23 2009-12-02 株式会社日立製作所 予知型データ移行を行う階層ストレージシステム
US7685186B2 (en) * 2007-06-25 2010-03-23 Microsoft Corporation Optimized and robust in-place data transformation
US8249257B2 (en) * 2007-09-28 2012-08-21 Intel Corporation Virtual TPM keys rooted in a hardware TPM
US8396838B2 (en) 2007-10-17 2013-03-12 Commvault Systems, Inc. Legal compliance, electronic discovery and electronic document handling of online and offline copies of data
US8259948B2 (en) * 2007-12-29 2012-09-04 Intel Corporation Virtual TPM key migration using hardware keys
US8769048B2 (en) 2008-06-18 2014-07-01 Commvault Systems, Inc. Data protection scheduling, such as providing a flexible backup window in a data protection system
US9128883B2 (en) 2008-06-19 2015-09-08 Commvault Systems, Inc Data storage resource allocation by performing abbreviated resource checks based on relative chances of failure of the data storage resources to determine whether data storage requests would fail
US8352954B2 (en) 2008-06-19 2013-01-08 Commvault Systems, Inc. Data storage resource allocation by employing dynamic methods and blacklisting resource request pools
US8725688B2 (en) 2008-09-05 2014-05-13 Commvault Systems, Inc. Image level copy or restore, such as image level restore without knowledge of data object metadata
US20100070474A1 (en) 2008-09-12 2010-03-18 Lad Kamleshkumar K Transferring or migrating portions of data objects, such as block-level data migration or chunk-based data migration
US8359192B2 (en) 2008-11-19 2013-01-22 Lemi Technology, Llc System and method for internet radio station program discovery
US20100257218A1 (en) * 2009-04-03 2010-10-07 Konstantin Iliev Vassilev Merging multiple heterogeneous file systems into a single virtual unified file system
US8874628B1 (en) * 2009-10-15 2014-10-28 Symantec Corporation Systems and methods for projecting hierarchical storage management functions
US9128942B1 (en) * 2010-12-24 2015-09-08 Netapp, Inc. On-demand operations
US9021198B1 (en) 2011-01-20 2015-04-28 Commvault Systems, Inc. System and method for sharing SAN storage
US8849762B2 (en) 2011-03-31 2014-09-30 Commvault Systems, Inc. Restoring computing environments, such as autorecovery of file systems at certain points in time
US9146679B2 (en) * 2011-06-18 2015-09-29 International Business Machines Corporation Effectively limitless apparent free space on storage device
US9087010B2 (en) * 2011-12-15 2015-07-21 International Business Machines Corporation Data selection for movement from a source to a target
US9779008B2 (en) * 2012-02-21 2017-10-03 Disney Enterprises, Inc. File monitoring
US10157184B2 (en) 2012-03-30 2018-12-18 Commvault Systems, Inc. Data previewing before recalling large data files
GB2504716A (en) * 2012-08-07 2014-02-12 Ibm A data migration system and method for migrating data objects
US9633216B2 (en) 2012-12-27 2017-04-25 Commvault Systems, Inc. Application of information management policies based on operation with a geographic entity
US9459968B2 (en) 2013-03-11 2016-10-04 Commvault Systems, Inc. Single index to query multiple backup formats
US9298752B2 (en) * 2013-08-26 2016-03-29 Dropbox, Inc. Facilitating data migration between database clusters while the database continues operating
US9514164B1 (en) 2013-12-27 2016-12-06 Accenture Global Services Limited Selectively migrating data between databases based on dependencies of database entities
US9798596B2 (en) 2014-02-27 2017-10-24 Commvault Systems, Inc. Automatic alert escalation for an information management system
US9648100B2 (en) 2014-03-05 2017-05-09 Commvault Systems, Inc. Cross-system storage management for transferring data across autonomous information management systems
US9823978B2 (en) 2014-04-16 2017-11-21 Commvault Systems, Inc. User-level quota management of data objects stored in information management systems
US9740574B2 (en) 2014-05-09 2017-08-22 Commvault Systems, Inc. Load balancing across multiple data paths
US10860237B2 (en) 2014-06-24 2020-12-08 Oracle International Corporation Storage integrated snapshot cloning for database
US9852026B2 (en) 2014-08-06 2017-12-26 Commvault Systems, Inc. Efficient application recovery in an information management system based on a pseudo-storage-device driver
US11249858B2 (en) 2014-08-06 2022-02-15 Commvault Systems, Inc. Point-in-time backups of a production application made accessible over fibre channel and/or ISCSI as data sources to a remote application by representing the backups as pseudo-disks operating apart from the production application and its host
US10387447B2 (en) * 2014-09-25 2019-08-20 Oracle International Corporation Database snapshots
US10346362B2 (en) 2014-09-26 2019-07-09 Oracle International Corporation Sparse file access
US9444811B2 (en) 2014-10-21 2016-09-13 Commvault Systems, Inc. Using an enhanced data agent to restore backed up data across autonomous storage management systems
US9443550B2 (en) * 2015-01-30 2016-09-13 Oracle International Corporation Data storage system providing efficient and secure data migration with tape drive technology
US9766825B2 (en) 2015-07-22 2017-09-19 Commvault Systems, Inc. Browse and restore for block-level backups
US11068437B2 (en) 2015-10-23 2021-07-20 Oracle Interntional Corporation Periodic snapshots of a pluggable database in a container database
US10296368B2 (en) 2016-03-09 2019-05-21 Commvault Systems, Inc. Hypervisor-independent block-level live browse for access to backed up virtual machine (VM) data and hypervisor-free file-level recovery (block-level pseudo-mount)
KR20170133866A (ko) * 2016-05-27 2017-12-06 삼성에스디에스 주식회사 데이터 이관 장치 및 방법
WO2018037464A1 (ja) * 2016-08-22 2018-03-01 株式会社エーピーコミュニケーションズ ストレージシステム、ストレージ通信装置、ダウンロード方法、及びコンピュータプログラム
US10838821B2 (en) 2017-02-08 2020-11-17 Commvault Systems, Inc. Migrating content and metadata from a backup system
US10740193B2 (en) 2017-02-27 2020-08-11 Commvault Systems, Inc. Hypervisor-independent reference copies of virtual machine payload data based on block-level pseudo-mount
DE102017203239A1 (de) 2017-02-28 2018-08-30 Siemens Aktiengesellschaft Verfahren und Speichersystem zum Speichern von einer Vielzahl von Dateneinheiten
US10891069B2 (en) 2017-03-27 2021-01-12 Commvault Systems, Inc. Creating local copies of data stored in online data repositories
US10776329B2 (en) 2017-03-28 2020-09-15 Commvault Systems, Inc. Migration of a database management system to cloud storage
US11074140B2 (en) 2017-03-29 2021-07-27 Commvault Systems, Inc. Live browsing of granular mailbox data
US10496318B1 (en) * 2017-04-28 2019-12-03 EMC IP Holding Company LLC System and method for capacity management in multi-tiered storage
US10664352B2 (en) 2017-06-14 2020-05-26 Commvault Systems, Inc. Live browsing of backed up data residing on cloned disks
US10817203B1 (en) * 2017-08-29 2020-10-27 Amazon Technologies, Inc. Client-configurable data tiering service
US10795927B2 (en) 2018-02-05 2020-10-06 Commvault Systems, Inc. On-demand metadata extraction of clinical image data
US10754729B2 (en) 2018-03-12 2020-08-25 Commvault Systems, Inc. Recovery point objective (RPO) driven backup scheduling in a data storage management system
US10789387B2 (en) 2018-03-13 2020-09-29 Commvault Systems, Inc. Graphical representation of an information management system
US11068460B2 (en) 2018-08-06 2021-07-20 Oracle International Corporation Automated real-time index management
US10929166B2 (en) * 2018-10-19 2021-02-23 Hewlett Packard Enterprise Development Lp Enhanced data storage of virtual nodes in a data processing environment
US10860443B2 (en) 2018-12-10 2020-12-08 Commvault Systems, Inc. Evaluation and reporting of recovery readiness in a data storage management system
US11086549B2 (en) 2019-05-21 2021-08-10 International Business Machines Corporation Just-in-time data migration in a live system
US11429564B2 (en) 2019-06-18 2022-08-30 Bank Of America Corporation File transferring using artificial intelligence
US11308034B2 (en) 2019-06-27 2022-04-19 Commvault Systems, Inc. Continuously run log backup with minimal configuration and resource usage from the source machine
RU2751798C9 (ru) * 2019-12-31 2021-11-16 Банк ВТБ (публичное акционерное общество) Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276867A (en) * 1989-12-19 1994-01-04 Epoch Systems, Inc. Digital data storage system with improved data migration
US5317728A (en) * 1990-09-07 1994-05-31 International Business Machines Corporation Storage management of a first file system using a second file system containing surrogate files and catalog management information
US5333315A (en) * 1991-06-27 1994-07-26 Digital Equipment Corporation System of device independent file directories using a tag between the directories and file descriptors that migrate with the files
US5367698A (en) * 1991-10-31 1994-11-22 Epoch Systems, Inc. Network file migration system
US5479656A (en) * 1992-05-13 1995-12-26 Rawlings, Iii; Joseph H. Method and system for maximizing data files stored in a random access memory of a computer file system and optimization therefor
US5506986A (en) * 1992-07-14 1996-04-09 Electronic Data Systems Corporation Media management system using historical data to access data sets from a plurality of data storage devices
US5495607A (en) * 1993-11-15 1996-02-27 Conner Peripherals, Inc. Network management system having virtual catalog overview of files distributively stored across network domain

Also Published As

Publication number Publication date
AU5325296A (en) 1996-10-16
CN1079552C (zh) 2002-02-20
AU694022B2 (en) 1998-07-09
WO1996030839A1 (en) 1996-10-03
US5564037A (en) 1996-10-08
DE69636192T2 (de) 2007-04-05
EP0818006B1 (en) 2006-05-31
ATE328324T1 (de) 2006-06-15
EP0818006A4 (en) 2000-06-21
CN1184538A (zh) 1998-06-10
KR100446339B1 (ko) 2004-12-08
EP0818006A1 (en) 1998-01-14
RU2190248C2 (ru) 2002-09-27
BR9608000A (pt) 1999-08-17
JPH11511272A (ja) 1999-09-28
MX9707374A (es) 1998-03-31
DE69636192D1 (de) 2006-07-06

Similar Documents

Publication Publication Date Title
KR100446339B1 (ko) 실시간데이터이송시스템및스파스파일을사용하는방법
EP2163988B1 (en) Snapshot system and method
US5239647A (en) Data storage hierarchy with shared storage level
US7657721B2 (en) Method of maintaining a plurality of snapshots, server apparatus and storage apparatus
US5491810A (en) Method and system for automated data storage system space allocation utilizing prioritized data set parameters
US5751997A (en) Method and apparatus for transferring archival data among an arbitrarily large number of computer devices in a networked computer environment
US9009443B2 (en) System and method for optimized reclamation processing in a virtual tape library system
US5805864A (en) Virtual integrated cartridge loader for virtual tape storage system
EP1465072B1 (en) Computer system with distributed file system for managing distributed files
EP0476841A2 (en) Storage management across file systems
US8001327B2 (en) Method and apparatus for managing placement of data in a tiered storage system
JP3017892B2 (ja) ファイル管理装置
JP2005501317A (ja) 外部データ記憶装置管理システムおよび方法
JPS6310250A (ja) 仮想論理ボリユ−ム管理方式
JP2003513355A5 (ko)
US9122689B1 (en) Recovering performance of a file system post-migration
JP4394467B2 (ja) ストレージシステム、サーバ装置及び先行コピーデータ生成方法
US5802557A (en) System and method for caching information in a digital data storage subsystem
JPH07182225A (ja) Ｏｓリソースのオンライン増減設方式
CA2216723C (en) Real time data migration system and method employing sparse files
MXPA97007374A (en) Real-time data migration system ymetodo that uses esca files
JP2001125879A (ja) データ記憶システムおよびデータ記憶方法
JPH0744426A (ja) ファイルシステムのファイル管理方法
JPS62107364A (ja) コンピュータシステムにおけるノード間のアクセス方法
JPH05324433A (ja) データベース入力制御方式

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee