KR100446339B1 - 실시간데이터이송시스템및스파스파일을사용하는방법 - Google Patents

실시간데이터이송시스템및스파스파일을사용하는방법 Download PDF

Info

Publication number
KR100446339B1
KR100446339B1 KR1019970706734A KR19970706734A KR100446339B1 KR 100446339 B1 KR100446339 B1 KR 100446339B1 KR 1019970706734 A KR1019970706734 A KR 1019970706734A KR 19970706734 A KR19970706734 A KR 19970706734A KR 100446339 B1 KR100446339 B1 KR 100446339B1
Authority
KR
South Korea
Prior art keywords
file
data file
storage device
transfer
sparse
Prior art date
Application number
KR1019970706734A
Other languages
English (en)
Other versions
KR19980703329A (ko
Inventor
퉁 람 와이
Original Assignee
체옌네 소프트웨어 인코오포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 체옌네 소프트웨어 인코오포레이티드 filed Critical 체옌네 소프트웨어 인코오포레이티드
Publication of KR19980703329A publication Critical patent/KR19980703329A/ko
Application granted granted Critical
Publication of KR100446339B1 publication Critical patent/KR100446339B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/185—Hierarchical storage management [HSM] systems, e.g. file migration or policies thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99951—File or database maintenance
    • Y10S707/99952—Coherency, e.g. same view to multiple users
    • Y10S707/99953—Recoverability
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99951—File or database maintenance
    • Y10S707/99952—Coherency, e.g. same view to multiple users
    • Y10S707/99955—Archiving or backup

Abstract

네트웍 컴퓨터 시스템(1)에서의 실시간 데이터 이송을 위한 시스템 및 방법은 이송된 파일을 표현하기 위해 잘 알려진 운영 체계 특징인 스파스 파일(4C)을 이용한다. 스파스 파일은 파일 서버(10)에서 최소의 물리적 공간을 차지하지만, 원본 파일과 동일한 크기 및 속성을 갖는 것으로서 정의된다. 사용자가 이송된 파일을 액세스할 경우, 그 파일은 파일 서버에 상주하는 것처럼 보이며, 계층 기억 관리 시스템(20,30)에서의 최적화된 기억 위치로부터 자동적이며, 투명하게 파일 서버로 복귀된다.

Description

실시간 데이터 이송 시스템 및 스파스 파일을 사용하는 방법{REAL TIME DATA MIGRATION SYSTEM AND METHOD EMPLOYING SPARSE FILES}
서버 기반의 데이터 이송 관리 시스템이 표준 사무실 장비가 되어감에 따라, 데이터 관리의 필요성이 급속히 증가되고 있다. 최근에, 기업의 직원들은 근거리 통신망(LAN)을 통해 다른 컴퓨터들과 접속된 개인용 컴퓨터(PC) 또는 워크스테이션을 갖고 있다.
일반적으로, LAN은 메인 메모리 및/또는 프린터와 같은 자원과 데이터를 함께 공유하도록 접속된 컴퓨터 워크스테이션과 같은 복수의 컴퓨터 시스템을 포함한다. LAN은 흔히 네트웍 서비스를 제공하는 파일 서버(file sever)를 포함한다. 파일 서버는 일반적으로 컴퓨터 네트웍 상의 노드(node), 예컨대 컴퓨터로서, 공유된 자원 관리를 통해, 그 네트웍 상의 컴퓨터 단말기에게 서비스를 제공한다. 예를 들어, 파일 서버는 한 세트의 기억 디스크를 관리할 수 있으며, 자체에 디스크를 갖고 있지 않거나, 외부적으로 저장할 필요가 있는 데이터를 갖는 네트웍 상의 컴퓨터 단말기에게 기억 및 저장(archival) 서비스를 제공할 수 있다.
LAN의 기억 장치에 대한 필요성은 매우 빠른 속도로 증가하고 있다. 최근에, 다수의 서버들은 기가 바이트급의 데이터를 관리하고 있다. 더욱이, 데이터 저장 및 보호 능력은 많은 네트웍 사용자들에게 중대한 문제가 되고 있다. 가장 공통적인 데이터 보호 방법은 한 위치보다는 여러 위치에 데이터를 유지하는 방법이다. ARCserve(상표명) 데이터 관리 시스템과 같은 서버 기반의 데이터 관리 시스템은 LAN 파일 서버 및/또는 그 LAN 에 접속된 컴퓨터 시스템 상에 저장되는 데이터의 백업 및 보호 기능을 제공한다.
그러나, 단순히 컴퓨터 네트웍으로부터의 데이터를 백업 및 저장하는 기능을 제공하는 것만으로는 충분하지 못하다. 특히, 네트웍 사용자에게 있어 데이터를 외부적으로 저장하는 기능은 자동적이며 최적으로 투명하게 동작되는 것을 필요로 한다. 컴퓨터 네트웍으로부터의 데이터를 효과적으로 외부적으로 저장하는 기능을 제공하는 하나의 기술은 "계층 기억 관리(HSM)" 기술이다.
HSM은 제2 계층 및 가능한 한 제3 계층의 기억 장치 내에 파일 서버의 외부컴퓨터 네트웍 데이터를 저장하는 기능을 포함한다. 일반적으로, 외부 기억 장치는 일회 기록 가능한 광 기억 장치, 재기록 가능한 광 기억 장치 및 자기 테이프와 같은 대용량 기억 장치가 있다. 예를 들어, 광 기억 장치 및 자기 테이프 드라이브는 각각 제2 및 제3 기억 장치로서 파일 서버에 연결될 수 있다. HSM 애플리케이션에 의해 구현된 기준에 기초하여, 파일 서버에 저장된 데이터는 광 기억 장치로 이송될 수 있고, 선택 가능한 기준에 따라, 테이프 드라이브로 더 이송될 수 있다.
예를 들어, 데이터에 대한 이용 회수는 데이터를 파일 서버로부터 제2 및 제 3 기억 장치로 이송하기 위한 기준으로서 사용될 수 있다. 자주 이용, 즉 액세스되지 않는 데이터를 이송함으로써, 파일 서버 상의 공간이 충분해지는 동시에, 그 데이터 파일들이 여전히 파일 서버 상에 상주된 것처럼 사용자들이 계속하여 그 데이터 파일들을 검색할 수 있다. 여기서, "이송"이란 파일 서버로부터 기억 계층(예컨대, 외부 기억 장치)으로의 이동을 의미한다. "역이송"이란 기억 계층으로부터 파일 서버로의 데이터 복구를 의미한다.
HSM 애플리케이션의 최적의 이점을 획득하기 위해, 제2 기억 및 제3 기억 장치는 데이터 저장을 위한 계층적 배치로 배열된다. 따라서, 미리 결정된 시간 주기동안 네트웍 파일 서버 상에 상주하는 데이터 파일은 처음에 광 기억 장치로 이송될 수 있는데, 이 광 기억 장치는 네트웍 파일 서버가 그 데이터 파일을 요청할 때, 상대적으로 빠른 응답 시간을 제공한다. 만일, 그 데이터 파일이 파일 서버에 의한 요청 없이 미리 결정된 시간 주기 동안 광 기억 장치 상에 상주한다면, 이 데이터 파일은 기억 계층에 따라, 광 기억 장치에 비해 상대적으로 느린 응답 시간을 갖는 자기 테이프 기억 장치로 더 이송될 수 있다. 그러므로, 계층 기억 관리 시스템은 기억 장치의 계층에 대한 비용, 속도 및 용량에 기초하여 네트웍 컴퓨터 시스템의 데이터 파일을 저장하기 위한 보다 효율적인 방법을 제공한다.
파일이 파일 서버로부터 이송될 경우, 원본 파일(original file)은 팬텀 파일(phantom file) 또는 툼스톤 파일(tombstone file)로도 불리는 스터브 파일(stub file)로서 파일 서버 상에 표현된다. 스터브 파일은 원본 파일을 나타내는 동시에물리적으로 최소한의 할당된 공간을 이용함으로써, 파일 서버 상에서 가능한 한 많은 공간을 충분히 이용 가능하게 한다. 그러나, 스터브 파일은 또한 예컨대, 파일크기, 생성된 데이터, 마지막으로 액세스된 데이터 또는 판독 전용 파일과 같은 일정한 속성과 가능한 한 밀접하게 원본 파일의 특성을 표현한다. 그러나, 이송을 수행하는 특정 HSM 실행에 따를 경우에, 파일 크기는 정확하게 표현되지 않는다. 파일 서버에 잔존하는 스터브 파일은 원본 파일의 실제 크기와 상관 없이 0, 422 또는 1000 바이트의 크기를 갖는다. 예컨대, 100 메가바이트 파일이 네트웍 파일 서버로부터 외부 기억 장치로 이송될 수 있으며, 일반적으로 그 파일 서버에 남겨지는 스터브 파일은 0, 422 또는 1000 바이트의 크기로 보인다.
그러므로, 잘 알려진 이송 실행은 이송된 파일을 표현하기 위해 스터브 파일을 이용함으로써, 파일 서버의 물리적 공간 할당을 줄일 수도 있지만, 그 잘 알려진 이송 방법은 원본 파일의 실제의 특성을 정확하게 표현하지는 못한다. 표현(representation)의 정확성, 특히 원본 파일의 크기는 파일 크기가 이용되는 모든 소프트웨어 애플리케이션에 대하여 중요한 정보가 된다. 예를 들어, 일부의 LAN 소프트웨어 애플리케이션은 파일 서버에 의해 점유된 데이터량에 대한 통계적인 분석기능을 제공하려 하거나, 미리 결정된 값에 이르는 특정 파일 크기에 기초하여 어떤 관행적 기능을 수행하려 한다. 만일 이송된 파일들이 정확하게 표현되지 않는다면, 그 분석 기능 및 관행적 기능이 적절히 행해질 수 없게 된다. 또한, 예를 들어 DOS(상표명) 운영 체계의 DIR 명령은 사용자에게 잘못된 파일 크기를 제공할 수 있으며, 실제 파일 크기 이상으로 되어 사용자를 당황하게 할 수 있다. 이와유사하게, DOS(상표명) 운영 체계의 COPY 명령은 실제적으로 2 메가바이트인 이송된 파일에 대해 1000 바이트 크기를 보여줄 수 있으므로, 이는 사용자로 하여금 더 작은 플로피 디스크로 해당 파일을 복사하게끔 한다.
일반적으로 HSM 실행은 특정 LAN 운영 체계에 적합하게 맞추어지게 된다. 예를 들어, NOVELL(상표명) NetWare(상표명) 운영 체계는 많은 LAN 시스템에서 이용된다. 다양한 버젼의 NetWare(상표명) 운영 체계가 존재하며, 버젼 3.×및 4×를 포함한다.
예를 들어, NetWare(상표명) 운영 체계 버젼 4.×에는, 실시간 데이터 이송기(RTDM) 특징이 포함된다. 이러한 이송기 특징을 이용하여, NetWare(상표명) 파일서버[예컨대, NetWare(상표명) 운영 체계를 가동하는 파일 서버] 내의 파일 내용은 제2 기억 장치로 이송되며, 그 이송된 파일을 표현하는 파일 디렉토리 엔트리가 그 파일 서버 내에서 남겨진다. 파일 디렉토리 엔트리는 빈공간이므로 NetWare(상표명) 파일 서버 내의 물리적 공간을 차지하지 않을 것이다. 또한, 파일 디렉토리 엔트리는 이송된 파일의 실제 크기를 포함하는 이송된 파일의 정확한 특성을 나타낼 것이다. 파일 서버가 이송된 파일을 요철하면, 그 파일은 자동적으로 그 파일 서버로 복귀된다.
그러므로, NetWare(상표명) 운영 체계 버젼 4.× RTDM은 자동적이며, 투명하게 파일을 NetWare(상표명) 볼륨으로부터 제2 기억 장치로 이송하기 위한 도구를 제공하며, 이때 이송된 파일에 대해 최초 NetWare(상표명) 볼륨 내에 정확한 디렉토리 엔트리가 유지된다. 한편, 예를 들어, NetWare(상표명) 운영 체계 버젼 3.×는 이송 기능을 제공하지 않는다. 따라서, 소프트웨어 판매자는 NetWare(상표명) 운영 체계 버젼 3.×의 파일 서버용 데이터 이송 기능을 생성해야만 한다. 그러나, 잘 알려진 이송 애플리케이션은 이송된 파일을 정확히 표현하는 디렉토리 엔트리를 파일 서버 상에 제공하지 않는다. 즉, 그 이송 애플리케이션에 따라, 잔존하는 디렉토리 엔트리는 이송된 파일의 실제 크기와 다른 0, 422 또는 1000 바이트 크기를 갖는 스터브 파일이 될 것이다.
따라서, 본 발명의 목적은 예컨대, NetWare(상표명) 버젼 3.×의 파일 서버로부터의 데이터 이송을 제공함에 있으며, 그 NetWare(상표명) 버젼 3.×의 파일 서버는 이송된 파일의 크기를 정확하게 표현하지 않는 스터브 파일을 이용하지 않는다.
본 발명의 다른 목적은 사용자에게 절대적으로 투명한 파일 이송 및 역이송을 제공함에 있다.
본 발명은 네트웍 컴퓨터 시스템에서 계층 기억 관리 시스템 및 방법에 관한 것으로, 특히 데이터를 자동적이며, 투명하게 파일 서버로부터 보조 기억 장치로 이송하기 위한 방법에 관한 것이다.
도 1은 본 발명에 따른 계층 기억 관리 시스템을 사용하는 근거리 통신망 시스템을 나타낸다.
도 2는 본 발명에 따른 스파스 파일을 사용하는 실시간 데이터 이송 방법을 설명하는 흐름도이다.
도 3은 본 발명에 따른 스파스 파일을 사용하는 실시간 데이터 역이송 방법을 설명하는 흐름도이다.
도 4A는 논리적 크기를 갖는 데이터 파일을 나타낸다.
도 4B는 도 4A에서 나타낸 파일의 종래의 스파스 파일 표현을 나타낸다.
도 4C는 본 발명에 따라 도 4A에서 나타낸 파일의 스파스 파일 표현을 나타낸다.
본 발명의 따른 시스템 및 방법은 이송된 파일을 표현하기 위해서 잘 알려진 운영 체계 특징, 즉 스파스 파일(sparse file)을 이용하다. 스파스 파일은 논리적, 즉 외관상 크기보다 작은 물리적 크기(예컨대, 물리적 할당)를 갖는 파일이다. 그러므로, 스파스 파일은 파일에 의해 점유되는 물리적 공간을 최소화시키는 동시에, 생성된 데이터 및 크기와 같은 그 파일의 실제 특성을 보유한다. 또한 스파스 파일은 원본 파일의 모든 데이터 블록들을 제거하며, 원본 파일과 동일한 파일 크기를 가지므로, 원본 파일을 정확하게 표현하면서도 본질적으로 물리적인 공간을 점유하지 않는 것으로서 정의될 수 있다.
본 발명의 시스템 및 방법에 따르면, 파일이 파일 서버로부터 기억 매체로 이송될 경우, 그 파일 서버에서 이송된 파일은 원본 파일과 동일한 논리적 크기 및 속성을 갖는 스파스 파일로 대체된다. 그러나, 스파스 파일은 단지 파일 저장에 필요한 최소 공간, 예컨대 하나의 데이터 블록을 점유한다. 이송 키 정보가 스파스 파일 내에 저장됨으로써, 파일 서버는 사용자에 의해 액세스될 경우, 이송된 파일을 복구할 수 있다. 사용자가 이송된 파일을 액세스할 경우, 이 파일은 그의 실제 특성을 지닌체 파일 서버 상에 상주하는 것처럼 보이며, 제2 또는 제3 기억 매체로 부터 그 파일 서버로 자동적이며, 투명하게 복귀된다. 그러므로, 본 발명에 따른 계층 기억 관리 방법은 이송된 파일을 표현하는데 있어 미리 결정되고 비정확한 크기를 갖는 스터브 파일의 이용을 배제한다.
도 1은 본 발명에 따른 HSM 시스템(2)을 포함하는 LAN 시스템을 설명한다. HSM 시스템(2)은 예컨대, NetWare(상표명) 운영 체계 버젼 3.×환경에 HSM 기능을 제공하며, 제1 기억 장치로도 불리어지고 제2 기억 장치(20)에 연결되는 파일 서버(10)를 포함한다. 또한, 제2 기억 장치(20)는 제3 기억 장치(30)에 연결된다. 파일 서버(10), 제2 기억 장치(20) 및 제3 기억 장치(30)를 최적으로 이용함으로써, HSM 시스템(2)은 자동적이고 투명하게 계층적으로 예컨대, 기가바이트의 데이터를 저장할 수 있다.
LAN 시스템(1)은 예컨대, 클라이언트-서버(client-sever) 구조를 갖는다. 클라이언트는 예컨대, 파일 서버(10)에 연결된 복수의 워크스테이션(40)이다. 워크스테이션(40)은 예컨대, 마이크로프로세서 기반의 컴퓨터 시스템이다. 워크스테이션들(40) 중 적어도 하나는 사용자에게 인터페이스를 제공하여, 파일 서버(10)로부터의 데이터 이송을 위한 이송 기준을 설정하게 한다. 서버측은 파일 서버(10)로부터의 투명한 데이터 이송 서비스와, 파일 서버(10)로의 역이송 서비스를 제공하는 이송 엔진(11)을 갖는 파일 서버(10)를 포함한다.
이송 엔진(11)은 예컨대, 주기적으로 가동되어, 미리 정의된 기준에 따라 비활성 파일을 식별한다. 일단 파일이 이송용으로 식별되면, 이 파일은 HSM 시스템(2)의 기억 계층으로 이송됨으로써, 파일 서버(10) 상에 활성 파일을 위한추가의 기억 공간이 발생된다. 이 후에 HSM 시스템(2)은 기억 계층의 최하위 레벨에 도달할 때까지 기억 계층 내에서 이송되는 이송된 파일을 관리한다.
도 1에 나타난 바와 같이, 서버측은 예컨대, 3개의 개별 모듈을 포함한다. 제1 모듈은 파일 서버(10)이며, 자주 액세스되지 않는 파일과 같은 미리 선택된 파일을 상기 파일 서버로부터 저가의 기억 장치로 이동시키는 것이 바람직하다. 제2 모듈은 광 기억 장치를 지원하는 광단(optical stage)과 같은 제2 기억 장치(20)이다. 광단은 파일 서버(10)와 동일한 또는 상이한 NetWare(상표명) 운영 체계 서버상에 있을 수 있다. 제3 모듈은 테이프 교환기를 지원하는 테이프 단과 같은 제3 기억 장치(30)이다. 제3 테이프 단은 파일 서버(10) 또는 광단(20)과 동일한 또는 상이한 NetWare(상표명) 운영 체계 서버 상에 있을 수 있다. 제2 및 제3 모듈은 함께 기억 계층을 형성한다. 일반적으로, 기억 계층에서 각 단은 기억 매체의 균일한 집합으로서 예컨대, 그 단 내의 모든 매체는 동일한 물리적 특성을 갖는다. 단과 단 사이의 통신은 고유 NetWare(상표명) 운영 체계 통신 프로토콜 예컨대, IPX, SPX, TLI 또는 TCP/IP를 통해 이루어진다. 도 1에 나타낸 제2 기억 장치(20) 및 제 3 기억 장치(30)에 더하여, 부가적인 기억 장치 단이 HSM 시스템에 부가될 수 있다.
일반적으로, 재기록 가능한 광 기억 장치와 같은 광 기억 장치(20)는 탈착 가능하고, 액세스되기 이전에 항상 드라이브 내에 삽입하여 회전시켜야 하기 때문에, 5∼10 초 범위의 억세스 시간을 갖는다. 광 기억 장치의 자동 동작을 위해 주크박스(jukebox)가 이용될 수 있다. 그렇지 않은 경우에는, 작동자가 매체 장전 요청에 수동적으로 수행해야 한다. 휴렛-팻커드(Hewlett-Packard) 8mm 테이프 드라이브와 같은 테이프 기억 장치(30)는 탈착 가능하고, 액세스되기 이전에 항상 드라이브 내에 삽입하여 회전시켜야 하기 때문에, 수분의 액세스 시간을 가질 수 있다. 테이프 기억 장치의 자동 동작을 위해 자동 교환기(autochanger)가 이용될 수 있다. 그렇지 않은 경우에는, 작동자가 매체 장전 요청에 수동적으로 수행해야 한다.
도 1에서 나타낸 예시적인 기억 계층에서 각 단은 각각의 단 이송기(21,31)를 통해 제어된다. 단 이송기(21,31)는 예컨대, 파일 서버(10) 또는 분리된 파일 서버 상에 상주하는 소프트웨어 프로그램을 포함한다. 단 이송기(21,31)는 각각의 제2 기억 장치(20)와 제3 기억 장치(30)에 연결되는 파일 서버 상에 위치된다. 도 1에 나타낸 바와 같이, 단 이송기(21)는 파일 서버(15) 내에 위치되며, 단 이송기(31)는 파일 서버(16)에 위치된다. 각각의 단 이송기(21,31)는 예컨대, 이송된 파일들을 관리하고, 요청된 파일들을 복구하며, 기억 계층의 규칙에 따라 기억 계층 내의 다음 단으로 파일들을 이송한다. 기억 계층의 각 단은 단 이송기를 갖고 있기 때문에, 기억 계층은 분류될 수 있으며, 이로 인해 예컨대, 파일 서버(15,16)를 통해 파일 서버(10) 상의 처리 로드(load)를 감소시킨다.
LAN 시스템(1)의 사용자는 수용 가능한 제한 범위 내에서 파일 서버(10) 상의 디스크 기억 장치를 유지하도록 주기적으로 실행될 전체 파일 서버(10)를 위한 시스템 이송 작업을 설정할 수 있다. 또한, 사용자는 주문형 애드 혹(on-demand ad hoc) 이송 또는 역이송 작업을 수행할 수 있는 능력을 갖는다. 그러나, 임의의 파일 서버(10)로부터 제공된 모든 파일은 동일한 기억 계층으로 이송되어야만 한다.
시스템 이송 작업, 즉 파일 서버(10)로부터의 데이터 이송 작업에 있어서, 사용자는 이송될 파일/디렉토리를 지정해야할 필요가 있다. 이 선택 과정은 다양한 기준에 따라 사용자에 의해 이루어진다. 예컨대, 데이터 이송에 대한 파라미터 변수는 날짜 변수, 미리 결정된 필터, 또는 특정 장치의 기억 장치 가용성에 기초한 워터마크(water mark)가 포함될 수 있다.
날짜 파라미터 변수는 예컨대, 파일이 마지막으로 액세스된 날짜 또는 파일이 마지막으로 갱신된 날짜, 또는 파일 생성 날짜에 기초하여, 파일 서버(10)로부터의 파일 이송을 제공한다. 미리 결정된 필터 파라미터 변수는 예컨대, 파일명에 대한 패턴 일치, 파일의 속성(예컨대, 시스템 파일, 판독 전용 파일), 또는 미리 결정된 파일 크기에 기초하여, 파일 서버(10)로부터의 파일 이송을 제공한다. 워터마크 파라미터 변수는 특정 기억 장치에서 이용 가능한 기억 공간량에 기초하여, 파일 서버(10)로부터의 파일 이송을 제공한다.
예컨대, 워터마크 파라미터를 이용하면, HSM 시스템(2)은 파일 서버(10)에서 이용 가능한 기억 공간이 임계 워터마크에 도달될 경우에, 파일 서버(10)로부터 제 2 기억 장치(20)로 파일을 이송할 수 있으며, "볼륨 풀(volumn full)" 상태를 피하기 위해 미리 결정된 이송 기준에 따라 상기 임계 워터 마크점에서 긴급 이송이 즉각 발생될 것이다. 이 후에, 이용 가능한 기억 공간이 "하이" 워터마크(예컨대, 안전 레벨)에 도달할 때까지 파일이 이송될 것이다. "하이" 워터마크는 예컨대, 파일서버(10) 상에서 이용된 공간의 백분율로 정의될 수 있다. 이용 가능한 공간이 임계 워터마크 이하, "하이" 워터마크 이상에 있을 경우, "로우" 워터마크에 도달할때까지 예컨대, 가장 최근에 액세스된 시간을 기초로 하여 미리 결정된 시간에 파일들이 이송될 것이다. 또한, "로우" 워터마크는 예컨대, 파일 서버(10)상에서 이용된 공간의 백분율로서 정의된다. 이용된 공간이 "로우" 워터마크 이하에 있을 경우, 파일 서버(10)로부터의 이송은 발생하지 않는다.
파일 서버(10)로부터 이송되는 파일을 식별하기 위한 파라미터는 사용자가 원하는 바와 같이 조합될 수 있다. 사용자가 시스템 이송 작업을 설정할 때, 사용자는 또한 제2 기억 장치(20)로부터 제3 기억 장치(30)로의 추가 이송 작업의 여부를 지정할 수 있다. 또한, 사용자는 이송된 파일이 추가 이송 작업이 수행되기 전에 기억 장치 내에 잔존해야만 하는 시간 주기를 지정할 수 있다.
파일 서버(10) 상에 잔존하는 파일이 HSM 시스템(2)의 기억 계층으로 이송되는 것으로 식별된 경우, 도 2의 동작 흐름도에 의해 설명된 본 발명에 따른 방법으로 실행된다. 도 2에 도시한 바와 같이, 이송 엔진(11)이 파일 서버(10)로부터의 파일 이송 명령을 발생하는 단계 S0에서 처리 과정은 개시된다. 단계 S1에서, 이송되는 파일이 열려지고, 단계 S2에서 그 파일이 판독된다. 단계 S3에서, 이송되는 파일의 데이터 블록의 복사본(copy)이 제2 기억 장치(20)로 전승된다. 단 이송기(21)는 그 이송된 파일의 위치를 나타내는 이송 키(migration key)를 이송 엔진(11)으로 되돌아가게 한다.
일단 그 파일이 제2 기억 장치(10)로 전송되었다면, 단계 S4에서 파일 서버(10)에 여전히 잔존하는 최초의 파일은 절단(truncate)된다. 단계 S4에서의 원본 파일의 절단은 원본 파일의 데이터 블록을 할당하지 않으므로, 그 데이터 블록은 파일 서버(10)에 의한 재할당에 이용 가능하게 된다. 이러한 견지에서, 원본 파일은 단계 S4에서의 할당 해제으로 인해, 예컨대 제로 데이터 블록의 물리적 할당을 갖는다. 더욱이, 원본 파일의 실제 특성은 이송 엔진(11)이 저장하고 있다. 단계 S5에서, 이송 키는 원본 파일 내에 기록되며, 예컨대 이송 키를 포함하는 하나의 데이터 블록의 물리적 크기 할당을 갖는 스파스 파일이 된다. 따라서, 스파스 파일의 물리적 할당은 원본 파일의 논리적 크기(logical size)보다 작게 된다. 단계 S6에서, 이송 엔진(11)은 원본 파일의 실제 파일 크기와 동일한 논리적 크기를 갖는 원본 파일을 정의하며, 이에 따라 하나의 블록의 물리적 크기 할당을 갖는 스파스 파일을 생성하지만, 이 논리적 크기는 최초의 파일 사이트(site)와 동일한 크기를 갖는다. 이송 처리 과정은 이송 엔진(11)이 이송 처리를 종료하는 단계 S7에서 완성된다.
종래의 스파스 파일의 동작은 도 4A 및 4B에서 설명된다. n 데이터 블록(블록 0∼n)의 논리적 크기를 갖는 파일 중 일부는 도 4A에 도시한 데이터, 예컨대 데이터 블록 0, 4, 7, 10 및 n 을 포함한다. 도 4B에 도시한 파일은 스파스 파일로서, 도 4A 내의 파일을 나타낸다. 도 4B의 파일은 물리적 크기, 예컨대 5개의 데이터 블록을 가지며, 도 4A의 점유된 데이터 블록들만을 나타낸다. 결국, 스파스 파일은 논리적 크기보다 작은 물리적 크기를 갖는 파일을 생성하기 위한 방법을 제공하므로써, 파일 서버(10) 상의 기억 공간의 소모를 방지할 수 있다.
도 4B에 도시한 스파스 파일을 생성하기 위해, 컴퓨터 프로그래머는 LAN 시스템(1)의 운영 체계에 의해 인식되는 파일을 생성할 때 특정 명령을 제공한다. 예컨대, Novell(상표명) Netware(상표명) 운영 체계 버젼 3.×는 탐색(SEEK) 어드레스들 사이의 데이터 블록을 할당하지 않도록 탐색(SEEK) 명령을 해독한다. 이와 반대로, 다른 운영 체계는 탐색 어드레스들 사이에 있는 데이터 블록들을 할당하는 것으로서 탐색 명령을 처리한다. 표 1에 나타낸 단계들은 예시적인 단계들로서, 도 4B에서 설명된 스파스 파일을 생성하는데 이용될 수 있다.
Figure pct00001
따라서, 표 1에 나타낸 단계들은 Novell(상표명) Netware(상표명) 운영 체계버젼 3.×에 의해 해독되어, 단지 기록되는 데이터 블록들만을 할당하므로써, 점유된 데이터 블록들을 0, 4, 7, 10 및 n으로 나타내는 5개의 데이터 블록을 갖는 스파스 파일을 생성한다. 이 스파스 파일은 그의 실제 크기를 나타내지만, 사용자에 의해 액세스될 때, 이 파일은 도 4A에 도시한 형태, 즉 그의 논리적 크기와 같은 물리적 크기의 할당을 갖는 형태로서 사용자에게 제공된다.
본 발명에 따라, 스파스 파일 특징, 예컨대 Novell(상표명) Netware(상표명)운영 체계 버젼 3.×의 스파스 파일 특징은 원본 파일의 어떠한 점유된 데이터 블록들도 포함하지 않고 파일 서버(10)로부터 이송된 파일을 표현하는데 이용된다. 그러므로, 도 4C에서 도시된 바와 같이, 단지 하나의 데이터 블록을 갖지만, 도 4A 에서 나타낸 파일의 실제 크기와 같은 논리적 크기를 갖는 것으로 정의되는 스파스 파일이 본 발명에 따른 방법에 의해 생성된다. 도 4C에 나타낸 점선은 데이터 블록이 할당되지 않은 파일의 논리적 크기를 나타낸다. 표 2는 도 4C의 스파스 파일 생성에 대한 예시적인 단계들을 나타낸다.
Figure pct00002
본 발명에 따라, Novell(상표명) Netware(상표명) 운영 체계의 스파스 파일 특징은 원본 파일의 실제 특성을 보유하면서 파일 서버(10) 상에 이송된 파일을 표현하는데 필요한 물리적 할당을 최소화시키기 위해 이용된다. 따라서, 일단 원본 파일이 복사되고 제2 기억 장치(20)로 전송된 후 절단되면, 파일 서버에 잔존하는 파일은 표 2에서 설명한 예시적인 단계들에 의해 동작될 수 있다. 실제 파일 크기 까지 탐색(SEEK) 동작을 수행하는 단계 c는 스파스 파일이 원본 파일의 물리적 크기와 같은 논리적 크기를 갖고 있다고 정의한다. 그러나, 원본 파일의 할당 해제 (deallocation)는 파일 서버(10) 내에서 스파스 파일이 차지하는 물리적 크기를 감소시킨다.
표 2에 나타낸 단계에 덧붙여, 본 발명에 따라 스파스 파일을 생성하는 예시적인 단계의 다른 세트를 표 3에서 나타낸다
Figure pct00003
"크기 변경(CHANGE SIZE)" 동작은 스파스 파일의 논리적 크기를 정의하는데 이용될 수 있는데, 이는 파일 서버(10) 내의 원본 파일의 할당 해제에 기인하여, "크기 변환" 동작에 의해 영향을 받게 되는 할당된 데이터 블록들이 없기 때문이다. 따라서, 본 발명에 따른 방법은 파일 서버(10) 내에 이송된 파일, 즉 그 이송된 파일의 실제 특성을 갖는 것으로서 정의되며 최소의 물리적 크기를 갖는 스파스 파일을 표현하기 위하여, 잘 알려진 운영 체계 특징, 즉 스파스 파일을 이용한다.
파일이 파일 서버(10)로부터 HSM시스템(2)으로 이송되었다면, 그 파일은 파일 서버(10)로의 역이송 동작을 통해 복구된다. 예컨대, 사용자가 이송된 파일을 액세스하여, 파일 서버(10)가 이송 엔진(11)을 통해 그 파일을 요청할 때, 역이송 동작이 발생한다. 도 3에서 도시한 바와 같이, 역이송 과정은 이송된 파일이 파일 서버(10)에 의해 요청될 때, 단계 S10에서 개시된다.
단계 S10A에서, 이송 엔진(11)은 이송된 파일의 위치를 결정하기 위해, 스파스 파일에 저장된 이송 키 정보를 판독한다. 단계 S10B에서, 이송 엔진(11)은 이송키를 단 이송기(21)로 전송한다. 단계 S10C에서, 단 이송기(21)는 요청된 파일이제2 기억 장치(20)에 위치하고 있는 지 또는 제3 기억 장치(30)로 더 이송되었는 지의 여부를 결정하기 위해 이송 키를 이용한다. 파일의 위치가 결정되면, 단계 S10D에서, 파일은 이송 엔진(11)을 통해 파일 서버(10)로 전송된다. 단계 S11에서, 이송 엔진(11)은 요청된 파일의 데이터를 판독한다.
이송된 파일로부터의 데이터가 판독된 후에, 단계 S12에서 이송 엔진(11)에 의해 스파스 파일이 열려진다. 단계 S13에서, HSM 시스템(2)으로부터 복구된 원본 파일의 내용은 스파스 파일로 로딩되며, 이 스파스 파일은 다시 최초의 물리적 할당을 갖는 원본 파일로 변환된다. 그러므로, 단계 S13 후에, 원본 파일은 다시 최초(예컨대, 선이송)의 형태로 파일 서버(10)에 상주한다. 또한, 사용자는 파일 서버(10) 상의 디렉토리 엔트리가 사실상 원본 파일의 실제 데이터를 포함하지 않고 오히려 제한된 기술 정보(descriptive information)를 포함하는 스파스 파일이었다는 사실을 인식하지 못한다. 또한, 이송된 파일의 역이송 동작은 자동적이며, 사용자에게 투명하다.
단계 S14에서, 단지 원본 파일의 복사본(copy)이 기억 계층으로부터 복구되기 때문에 파일 서버(10)에 더 이상 존재하지 않고 기억 계층에 존재하는 스파스 파일에 형식적으로 저장되는 이송 키 정보는 예컨대, Novell(상표명) Netware(상표명) 운영 체계 확장 구분(EA) 내에 저장된다. 만일 복구된 파일이 변경되지 않고 나중에 이송되는 것으로 식별되는 경우에는, 이전의 이송 키는 불필요한 데이터가 기억 계층으로 전송되는 것을 방지하는데 이용될 수 있는데, 이는 그 파일이 이미 외부 기억 장치에 저장되기 때문이다. 이러한 경우, 단지 스파스 파일만이 파일 서버(10)에 생성될 것이다. 단계 S15에서, 이송 엔진(11)은 역이송 과정을 종료한다.

Claims (13)

  1. 네트워킹된 컴퓨터 시스템에서 제1 실제 크기를 갖는 데이터 파일을 제1 기억 장치로부터 제2 기억 장치로 이송하기 위한 방법에 있어서,
    상기 데이터 파일의 내용을 상기 제2 기억 장치로 전송하는 단계와,
    상기 데이터 파일을 절단(truncate)하는 단계와,
    상기 제1 기억 장치 내에 상기 제1 실제 크기와 같은 외관상 크기와, 상기 제1 실제 크기보다 작은 제2 실제 크기를 갖는 스파스 파일을 생성하는 단계를 포함하는 데이터 파일 이송 방법.
  2. 제1항에 있어서, 미리 결정된 기억 계층 구조의 기능에 따라 상기 제2 기억 장치로부터 제3 기억 장치로 상기 데이터를 이송하는 단계를 더 포함하는 데이터 파일 이송 방법.
  3. 제1항에 있어서, 상기 네트워킹된 컴퓨터 시스템은 Novell(등록상표) NetWare(등록상표) 버젼 3.×운영 체제를 포함하는 데이터 파일 이송 방법.
  4. 제1항에 있어서, 상기 스파스 파일 내에 이송 키를 저장하는 단계를 더 포함하는 데이터 파일 이송 방법.
  5. 제1항에 있어서, 상기 스파스 파일을 생성하는 단계는,
    상기 데이터 파일에 열기 동작을 수행하는 단계와,
    상기 데이터 파일에 제1 기록 동작을 수행하는 단계와,
    상기 데이터 파일에 탐색 동작을 수행하는 단계와,
    상기 데이터 파일에 제2 기록 동작을 수행하는 단계와,
    상기 데이터 파일에 닫기 동작을 수행하는 단계를 더 포함하는 데이터 파일 이송 방법.
  6. 제5항에 있어서, 상기 탐색 동작은 상기 제1 실제 크기까지 탐색하는 데이터 파일 이송 방법.
  7. 제5항에 있어서, 상기 제1 기록 동작은 이송 키를 상기 데이터 파일에 기록하는 데이터 파일 이송 방법.
  8. 제1항에 있어서, 상기 스파스 파일을 생성하는 단계는,
    상기 데이터 파일에 열기 동작을 수행하는 단계와,
    상기 데이터 파일에 제1 기록 동작을 수행하는 단계와,
    상기 데이터 파일에 크기 변경 동작을 수행하는 단계와,
    상기 데이터 파일에 닫기 동작을 수행하는 단계를 더 포함하는 데이터 파일 이송 방법.
  9. 제8항에 있어서, 상기 크기 변경 동작은 크기를 상기 제1 실제 크기로 변경하는 데이터 파일 이송 방법.
  10. 네트워킹된 컴퓨터 시스템에서 제1 실제 크기를 갖는 데이터 파일을 제1 기억 장치로부터 이송하는 시스템에 있어서,
    상기 제1 기억 장치에 연결된 이송 엔진과,
    상기 이송 엔진에 연결된 제2 기억 장치를 포함하며,
    상기 이송 엔진은 상기 데이터 파일을 판독하고, 상기 데이터 파일의 내용을 상기 제2 기억 장치로 전송하며, 상기 제1 기억 장치 내에 상기 제1 실제 크기와 같은 외관상 크기와, 상기 제1 실제 크기보다 작은 제2 실제 크기를 갖는 스파스 파일을 생성하는 데이터 파일 이송 시스템.
  11. 제10항에 있어서, 상기 제2 기억 장치에 연결되어, 미리 결정된 기억 계층 구조의 기능에 따라, 더 이송되는 상기 데이터 파일을 수신하는 제3 기억 장치를 더 포함하는 데이터 파일 이송 시스템.
  12. 제10항에 있어서, 상기 이송 엔진은 상기 스파스 파일 내에 이송 키를 저장하는 데이터 파일 이송 시스템.
  13. 제10항에 있어서, 상기 네트워킹된 컴퓨터 시스템은 Novell(등록 상표) NetWare(등록 상표) 버젼 3.×운영 체제를 포함하는 데이터 파일 이송 시스템.
KR1019970706734A 1995-03-29 1996-03-29 실시간데이터이송시스템및스파스파일을사용하는방법 KR100446339B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US08/413056 1995-03-29
US8/413,056 1995-03-29
US08/413,056 US5564037A (en) 1995-03-29 1995-03-29 Real time data migration system and method employing sparse files

Publications (2)

Publication Number Publication Date
KR19980703329A KR19980703329A (ko) 1998-10-15
KR100446339B1 true KR100446339B1 (ko) 2004-12-08

Family

ID=23635640

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970706734A KR100446339B1 (ko) 1995-03-29 1996-03-29 실시간데이터이송시스템및스파스파일을사용하는방법

Country Status (11)

Country Link
US (1) US5564037A (ko)
EP (1) EP0818006B1 (ko)
JP (1) JPH11511272A (ko)
KR (1) KR100446339B1 (ko)
CN (1) CN1079552C (ko)
AT (1) ATE328324T1 (ko)
AU (1) AU694022B2 (ko)
BR (1) BR9608000A (ko)
DE (1) DE69636192T2 (ko)
RU (1) RU2190248C2 (ko)
WO (1) WO1996030839A1 (ko)

Families Citing this family (145)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5909700A (en) * 1996-12-23 1999-06-01 Emc Corporation Back-up data storage facility incorporating filtering to select data items to be backed up
US5873103A (en) * 1994-02-25 1999-02-16 Kodak Limited Data storage management for network interconnected processors using transferrable placeholders
US5678044A (en) * 1995-06-02 1997-10-14 Electronic Data Systems Corporation System and method for improved rehosting of software systems
US5680640A (en) * 1995-09-01 1997-10-21 Emc Corporation System for migrating data by selecting a first or second transfer means based on the status of a data element map initialized to a predetermined state
US5799324A (en) * 1996-05-10 1998-08-25 International Business Machines Corporation System and method for management of persistent data in a log-structured disk array
US5933653A (en) * 1996-05-31 1999-08-03 Emc Corporation Method and apparatus for mirroring data in a remote data storage system
US5835954A (en) * 1996-09-12 1998-11-10 International Business Machines Corporation Target DASD controlled data migration move
US5794254A (en) * 1996-12-03 1998-08-11 Fairbanks Systems Group Incremental computer file backup using a two-step comparison of first two characters in the block and a signature with pre-stored character and signature sets
US6038665A (en) * 1996-12-03 2000-03-14 Fairbanks Systems Group System and method for backing up computer files over a wide area computer network
US5822780A (en) * 1996-12-31 1998-10-13 Emc Corporation Method and apparatus for hierarchical storage management for data base management systems
JPH10224665A (ja) * 1997-02-04 1998-08-21 Sony Corp 送出システム
JP3734334B2 (ja) * 1997-05-07 2006-01-11 富士通株式会社 データ移行システム、データ移行用プログラムを格納したコンピュータ読み取り可能な記録媒体、及びデータ移行方法
US6366988B1 (en) 1997-07-18 2002-04-02 Storactive, Inc. Systems and methods for electronic data storage management
US5983368A (en) * 1997-08-26 1999-11-09 International Business Machines Corporation Method and system for facilitating hierarchical storage management (HSM) testing
US6145068A (en) * 1997-09-16 2000-11-07 Phoenix Technologies Ltd. Data transfer to a non-volatile storage medium
US6704553B1 (en) * 1997-10-08 2004-03-09 Thomas M. Eubanks System and method for providing automatic tuning of a radio receiver and for providing automatic control of a CD/tape player
US6145066A (en) * 1997-11-14 2000-11-07 Amdahl Corporation Computer system with transparent data migration between storage volumes
US6105037A (en) * 1997-12-12 2000-08-15 International Business Machines Corporation Apparatus for performing automated reconcile control in a virtual tape system
US5953729A (en) 1997-12-23 1999-09-14 Microsoft Corporation Using sparse file technology to stage data that will then be stored in remote storage
US6088805A (en) * 1998-02-13 2000-07-11 International Business Machines Corporation Systems, methods and computer program products for authenticating client requests with client certificate information
DE69920363T2 (de) * 1998-04-27 2005-09-29 Sony Corp. Daten aufnahme/wiedergabgabegerät und verfahren hierfür
US6757705B1 (en) * 1998-08-14 2004-06-29 Microsoft Corporation Method and system for client-side caching
US6199194B1 (en) * 1998-09-25 2001-03-06 Adaptec, Inc. Method and system for programming firmware over a computer network
US6378128B1 (en) * 1998-10-08 2002-04-23 Microsoft Corporation System and method for dynamically modifying an install-set
US6442601B1 (en) * 1999-03-25 2002-08-27 International Business Machines Corporation System, method and program for migrating files retrieved from over a network to secondary storage
US7035880B1 (en) 1999-07-14 2006-04-25 Commvault Systems, Inc. Modular backup and retrieval system used in conjunction with a storage area network
US6938058B2 (en) * 1999-08-23 2005-08-30 Eisenworld, Inc. Apparatus and method for transferring information between platforms
GB0002019D0 (en) * 2000-01-29 2000-03-22 Ibm Data migration tool
US7003641B2 (en) 2000-01-31 2006-02-21 Commvault Systems, Inc. Logical view with granular access to exchange data managed by a modular data and storage management system
US7434219B2 (en) 2000-01-31 2008-10-07 Commvault Systems, Inc. Storage of application specific profiles correlating to document versions
US6658436B2 (en) 2000-01-31 2003-12-02 Commvault Systems, Inc. Logical view and access to data managed by a modular data and storage management system
US6795835B2 (en) * 2000-05-19 2004-09-21 Centerbeam, Inc. Migration of computer personalization information
US6952730B1 (en) * 2000-06-30 2005-10-04 Hewlett-Packard Development Company, L.P. System and method for efficient filtering of data set addresses in a web crawler
US6751635B1 (en) * 2000-08-18 2004-06-15 Network Appliance, Inc. File deletion and truncation using a zombie file space
US6981005B1 (en) * 2000-08-24 2005-12-27 Microsoft Corporation Partial migration of an object to another storage location in a computer system
WO2003107219A1 (en) * 2000-09-11 2003-12-24 Zambeel, Inc. Storage system having partitioned migratable metadata
JP4627110B2 (ja) * 2000-10-16 2011-02-09 富士通株式会社 データ記憶装置
US7281010B2 (en) * 2000-11-15 2007-10-09 Lenovo (Singapore) Pte. Ltd. Trusted computing platform with dual key trees to support multiple public/private key systems
US7047420B2 (en) 2001-01-17 2006-05-16 Microsoft Corporation Exclusive encryption
US6990667B2 (en) * 2001-01-29 2006-01-24 Adaptec, Inc. Server-independent object positioning for load balancing drives and servers
US7043637B2 (en) 2001-03-21 2006-05-09 Microsoft Corporation On-disk file format for a serverless distributed file system
US6981138B2 (en) 2001-03-26 2005-12-27 Microsoft Corporation Encrypted key cache
US7062490B2 (en) * 2001-03-26 2006-06-13 Microsoft Corporation Serverless distributed file system
US6988124B2 (en) * 2001-06-06 2006-01-17 Microsoft Corporation Locating potentially identical objects across multiple computers based on stochastic partitioning of workload
US7546354B1 (en) * 2001-07-06 2009-06-09 Emc Corporation Dynamic network based storage with high availability
CA2461025A1 (en) * 2001-09-26 2003-04-03 Mark Saake Efficient mangement of large files
US8640136B2 (en) * 2001-09-26 2014-01-28 Emc Corporation Sharing objects between computer systems
US7107298B2 (en) * 2001-09-28 2006-09-12 Commvault Systems, Inc. System and method for archiving objects in an information store
JP4176341B2 (ja) * 2001-10-23 2008-11-05 株式会社日立製作所 記憶制御装置
EP1589412A3 (en) * 2001-11-13 2008-12-31 Hitachi, Ltd. Computer data migration system
JP4168626B2 (ja) * 2001-12-06 2008-10-22 株式会社日立製作所 記憶装置間のファイル移行方法
JP2003237914A (ja) * 2002-02-15 2003-08-27 Hitachi Ltd 記憶メディア保管システム及びその運用方法
DE10211606B4 (de) * 2002-03-12 2017-06-08 Kip Cr P1 Lp Datenverarbeitungseinrichtung mit einem Metadatensicherungsmanagement
US6964833B2 (en) * 2002-05-31 2005-11-15 Samsung Electronics Co., Ltd. Linked dihydrazone-based charge transport compounds
US7937704B2 (en) 2002-06-20 2011-05-03 British Telecommunications Public Limited Company Distributed computer
US7937430B1 (en) * 2002-07-31 2011-05-03 At&T Intellectual Property I, L.P. System and method for collecting and transmitting data in a computer network
KR100457046B1 (ko) * 2002-08-07 2004-11-10 삼성전자주식회사 반도체 장치의 제조에서 콘택 형성 방법
CA2497825A1 (en) * 2002-09-10 2004-03-25 Exagrid Systems, Inc. Method and apparatus for server share migration and server recovery using hierarchical storage management
GB0230331D0 (en) 2002-12-31 2003-02-05 British Telecomm Method and apparatus for operating a computer network
US6981117B2 (en) 2003-01-29 2005-12-27 International Business Machines Corporation Method, system, and program for transferring data
JP4267353B2 (ja) 2003-03-28 2009-05-27 株式会社日立製作所 データ移行支援システム、および、データ移行支援方法
JP2004318743A (ja) * 2003-04-21 2004-11-11 Hitachi Ltd ファイル移送装置
US7454569B2 (en) 2003-06-25 2008-11-18 Commvault Systems, Inc. Hierarchical system and method for performing storage operations in a computer network
EP1661039A2 (en) * 2003-08-29 2006-05-31 Koninklijke Philips Electronics N.V. File migration history controls updating of pointers
US7734690B2 (en) * 2003-09-05 2010-06-08 Microsoft Corporation Method and apparatus for providing attributes of a collaboration system in an operating system folder-based file system
US7546324B2 (en) 2003-11-13 2009-06-09 Commvault Systems, Inc. Systems and methods for performing storage operations using network attached storage
JP2005165486A (ja) * 2003-12-01 2005-06-23 Sony Corp ファイル管理装置、ストレージ管理システム、ストレージ管理方法、プログラム及び記録媒体
US20050216532A1 (en) * 2004-03-24 2005-09-29 Lallier John C System and method for file migration
GB0412655D0 (en) * 2004-06-07 2004-07-07 British Telecomm Distributed storage network
JP2006079273A (ja) * 2004-09-08 2006-03-23 Sony Corp ファイル管理装置、ネットワークシステム、ファイル管理方法及びプログラム
JP4349301B2 (ja) * 2004-11-12 2009-10-21 日本電気株式会社 ストレージ管理システムと方法並びにプログラム
US20060136525A1 (en) * 2004-12-21 2006-06-22 Jens-Peter Akelbein Method, computer program product and mass storage device for dynamically managing a mass storage device
US7831639B1 (en) * 2004-12-22 2010-11-09 Symantec Operating Corporation System and method for providing data protection by using sparse files to represent images of data stored in block devices
US20060230136A1 (en) * 2005-04-12 2006-10-12 Kenneth Ma Intelligent auto-archiving
DE602006020709D1 (de) * 2005-04-20 2011-04-28 Axxana Israel Ltd Ferndaten-spiegelungssystem
US7853667B1 (en) * 2005-08-05 2010-12-14 Network Appliance, Inc. Emulation of transparent recall in a hierarchical storage management system
US7464114B2 (en) * 2005-09-27 2008-12-09 International Business Machines Corporation Method and apparatus to capture and transmit dense diagnostic data of a file system
US20070130232A1 (en) * 2005-11-22 2007-06-07 Therrien David G Method and apparatus for efficiently storing and managing historical versions and replicas of computer data files
JP4563314B2 (ja) * 2005-12-14 2010-10-13 富士通株式会社 ストレージシステム制御装置、ストレージシステム制御プログラム、ストレージシステム制御方法
US7552300B2 (en) * 2006-01-03 2009-06-23 International Business Machines Corporation Method for migrating objects in content management systems through exploitation of file properties, temporal locality, and spatial locality
JP4908849B2 (ja) * 2006-01-11 2012-04-04 富士通セミコンダクター株式会社 ファイル削除方法、ファイル・オープン方法、ファイル削除プログラム、および、ファイル・オープン・プログラム
US7543128B2 (en) * 2006-07-25 2009-06-02 Hewlett-Packard Development Company, L.P. Method and apparatus for repurposing compute resources to implement, or not implement, storage access protocols
US7734669B2 (en) 2006-12-22 2010-06-08 Commvault Systems, Inc. Managing copies of data
US8738588B2 (en) * 2007-03-26 2014-05-27 International Business Machines Corporation Sequential media reclamation and replication
US7720819B2 (en) * 2007-04-12 2010-05-18 International Business Machines Corporation Method and apparatus combining revision based and time based file data protection
JP4375435B2 (ja) 2007-05-23 2009-12-02 株式会社日立製作所 予知型データ移行を行う階層ストレージシステム
US7685186B2 (en) * 2007-06-25 2010-03-23 Microsoft Corporation Optimized and robust in-place data transformation
US8249257B2 (en) * 2007-09-28 2012-08-21 Intel Corporation Virtual TPM keys rooted in a hardware TPM
US8396838B2 (en) 2007-10-17 2013-03-12 Commvault Systems, Inc. Legal compliance, electronic discovery and electronic document handling of online and offline copies of data
US8259948B2 (en) * 2007-12-29 2012-09-04 Intel Corporation Virtual TPM key migration using hardware keys
US8769048B2 (en) 2008-06-18 2014-07-01 Commvault Systems, Inc. Data protection scheduling, such as providing a flexible backup window in a data protection system
US9128883B2 (en) 2008-06-19 2015-09-08 Commvault Systems, Inc Data storage resource allocation by performing abbreviated resource checks based on relative chances of failure of the data storage resources to determine whether data storage requests would fail
US8352954B2 (en) 2008-06-19 2013-01-08 Commvault Systems, Inc. Data storage resource allocation by employing dynamic methods and blacklisting resource request pools
US8725688B2 (en) 2008-09-05 2014-05-13 Commvault Systems, Inc. Image level copy or restore, such as image level restore without knowledge of data object metadata
US20100070474A1 (en) 2008-09-12 2010-03-18 Lad Kamleshkumar K Transferring or migrating portions of data objects, such as block-level data migration or chunk-based data migration
US8359192B2 (en) * 2008-11-19 2013-01-22 Lemi Technology, Llc System and method for internet radio station program discovery
US20100257218A1 (en) * 2009-04-03 2010-10-07 Konstantin Iliev Vassilev Merging multiple heterogeneous file systems into a single virtual unified file system
US8874628B1 (en) * 2009-10-15 2014-10-28 Symantec Corporation Systems and methods for projecting hierarchical storage management functions
US9128942B1 (en) * 2010-12-24 2015-09-08 Netapp, Inc. On-demand operations
US9021198B1 (en) 2011-01-20 2015-04-28 Commvault Systems, Inc. System and method for sharing SAN storage
US8849762B2 (en) 2011-03-31 2014-09-30 Commvault Systems, Inc. Restoring computing environments, such as autorecovery of file systems at certain points in time
US9146679B2 (en) * 2011-06-18 2015-09-29 International Business Machines Corporation Effectively limitless apparent free space on storage device
US9087010B2 (en) * 2011-12-15 2015-07-21 International Business Machines Corporation Data selection for movement from a source to a target
US9779008B2 (en) * 2012-02-21 2017-10-03 Disney Enterprises, Inc. File monitoring
US10157184B2 (en) 2012-03-30 2018-12-18 Commvault Systems, Inc. Data previewing before recalling large data files
GB2504716A (en) * 2012-08-07 2014-02-12 Ibm A data migration system and method for migrating data objects
US9633216B2 (en) 2012-12-27 2017-04-25 Commvault Systems, Inc. Application of information management policies based on operation with a geographic entity
US9459968B2 (en) 2013-03-11 2016-10-04 Commvault Systems, Inc. Single index to query multiple backup formats
US9298752B2 (en) * 2013-08-26 2016-03-29 Dropbox, Inc. Facilitating data migration between database clusters while the database continues operating
US9514164B1 (en) 2013-12-27 2016-12-06 Accenture Global Services Limited Selectively migrating data between databases based on dependencies of database entities
US10169121B2 (en) 2014-02-27 2019-01-01 Commvault Systems, Inc. Work flow management for an information management system
US9648100B2 (en) 2014-03-05 2017-05-09 Commvault Systems, Inc. Cross-system storage management for transferring data across autonomous information management systems
US9823978B2 (en) 2014-04-16 2017-11-21 Commvault Systems, Inc. User-level quota management of data objects stored in information management systems
US9740574B2 (en) 2014-05-09 2017-08-22 Commvault Systems, Inc. Load balancing across multiple data paths
US10860237B2 (en) 2014-06-24 2020-12-08 Oracle International Corporation Storage integrated snapshot cloning for database
US9852026B2 (en) 2014-08-06 2017-12-26 Commvault Systems, Inc. Efficient application recovery in an information management system based on a pseudo-storage-device driver
US11249858B2 (en) 2014-08-06 2022-02-15 Commvault Systems, Inc. Point-in-time backups of a production application made accessible over fibre channel and/or ISCSI as data sources to a remote application by representing the backups as pseudo-disks operating apart from the production application and its host
US10387447B2 (en) * 2014-09-25 2019-08-20 Oracle International Corporation Database snapshots
US10346362B2 (en) 2014-09-26 2019-07-09 Oracle International Corporation Sparse file access
US9444811B2 (en) 2014-10-21 2016-09-13 Commvault Systems, Inc. Using an enhanced data agent to restore backed up data across autonomous storage management systems
US9443550B2 (en) * 2015-01-30 2016-09-13 Oracle International Corporation Data storage system providing efficient and secure data migration with tape drive technology
US9766825B2 (en) 2015-07-22 2017-09-19 Commvault Systems, Inc. Browse and restore for block-level backups
US11068437B2 (en) 2015-10-23 2021-07-20 Oracle Interntional Corporation Periodic snapshots of a pluggable database in a container database
US10296368B2 (en) 2016-03-09 2019-05-21 Commvault Systems, Inc. Hypervisor-independent block-level live browse for access to backed up virtual machine (VM) data and hypervisor-free file-level recovery (block-level pseudo-mount)
KR20170133866A (ko) * 2016-05-27 2017-12-06 삼성에스디에스 주식회사 데이터 이관 장치 및 방법
WO2018037464A1 (ja) * 2016-08-22 2018-03-01 株式会社エーピーコミュニケーションズ ストレージシステム、ストレージ通信装置、ダウンロード方法、及びコンピュータプログラム
US10838821B2 (en) 2017-02-08 2020-11-17 Commvault Systems, Inc. Migrating content and metadata from a backup system
US10740193B2 (en) 2017-02-27 2020-08-11 Commvault Systems, Inc. Hypervisor-independent reference copies of virtual machine payload data based on block-level pseudo-mount
DE102017203239A1 (de) 2017-02-28 2018-08-30 Siemens Aktiengesellschaft Verfahren und Speichersystem zum Speichern von einer Vielzahl von Dateneinheiten
US10891069B2 (en) 2017-03-27 2021-01-12 Commvault Systems, Inc. Creating local copies of data stored in online data repositories
US10776329B2 (en) 2017-03-28 2020-09-15 Commvault Systems, Inc. Migration of a database management system to cloud storage
US11074140B2 (en) 2017-03-29 2021-07-27 Commvault Systems, Inc. Live browsing of granular mailbox data
US10496318B1 (en) * 2017-04-28 2019-12-03 EMC IP Holding Company LLC System and method for capacity management in multi-tiered storage
US10664352B2 (en) 2017-06-14 2020-05-26 Commvault Systems, Inc. Live browsing of backed up data residing on cloned disks
US10817203B1 (en) * 2017-08-29 2020-10-27 Amazon Technologies, Inc. Client-configurable data tiering service
US10795927B2 (en) 2018-02-05 2020-10-06 Commvault Systems, Inc. On-demand metadata extraction of clinical image data
US10761942B2 (en) 2018-03-12 2020-09-01 Commvault Systems, Inc. Recovery point objective (RPO) driven backup scheduling in a data storage management system using an enhanced data agent
US10789387B2 (en) 2018-03-13 2020-09-29 Commvault Systems, Inc. Graphical representation of an information management system
US11068460B2 (en) 2018-08-06 2021-07-20 Oracle International Corporation Automated real-time index management
US10929166B2 (en) * 2018-10-19 2021-02-23 Hewlett Packard Enterprise Development Lp Enhanced data storage of virtual nodes in a data processing environment
US10860443B2 (en) 2018-12-10 2020-12-08 Commvault Systems, Inc. Evaluation and reporting of recovery readiness in a data storage management system
US11086549B2 (en) 2019-05-21 2021-08-10 International Business Machines Corporation Just-in-time data migration in a live system
US11429564B2 (en) 2019-06-18 2022-08-30 Bank Of America Corporation File transferring using artificial intelligence
US11308034B2 (en) 2019-06-27 2022-04-19 Commvault Systems, Inc. Continuously run log backup with minimal configuration and resource usage from the source machine
RU2751798C9 (ru) * 2019-12-31 2021-11-16 Банк ВТБ (публичное акционерное общество) Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276867A (en) * 1989-12-19 1994-01-04 Epoch Systems, Inc. Digital data storage system with improved data migration
US5317728A (en) * 1990-09-07 1994-05-31 International Business Machines Corporation Storage management of a first file system using a second file system containing surrogate files and catalog management information
US5333315A (en) * 1991-06-27 1994-07-26 Digital Equipment Corporation System of device independent file directories using a tag between the directories and file descriptors that migrate with the files
US5367698A (en) * 1991-10-31 1994-11-22 Epoch Systems, Inc. Network file migration system
US5479656A (en) * 1992-05-13 1995-12-26 Rawlings, Iii; Joseph H. Method and system for maximizing data files stored in a random access memory of a computer file system and optimization therefor
US5506986A (en) * 1992-07-14 1996-04-09 Electronic Data Systems Corporation Media management system using historical data to access data sets from a plurality of data storage devices
US5495607A (en) * 1993-11-15 1996-02-27 Conner Peripherals, Inc. Network management system having virtual catalog overview of files distributively stored across network domain

Also Published As

Publication number Publication date
JPH11511272A (ja) 1999-09-28
CN1079552C (zh) 2002-02-20
RU2190248C2 (ru) 2002-09-27
EP0818006A1 (en) 1998-01-14
EP0818006B1 (en) 2006-05-31
ATE328324T1 (de) 2006-06-15
DE69636192T2 (de) 2007-04-05
DE69636192D1 (de) 2006-07-06
CN1184538A (zh) 1998-06-10
AU5325296A (en) 1996-10-16
AU694022B2 (en) 1998-07-09
US5564037A (en) 1996-10-08
KR19980703329A (ko) 1998-10-15
BR9608000A (pt) 1999-08-17
MX9707374A (es) 1998-03-31
EP0818006A4 (en) 2000-06-21
WO1996030839A1 (en) 1996-10-03

Similar Documents

Publication Publication Date Title
KR100446339B1 (ko) 실시간데이터이송시스템및스파스파일을사용하는방법
US6453404B1 (en) Distributed data cache with memory allocation model
US5317728A (en) Storage management of a first file system using a second file system containing surrogate files and catalog management information
KR101137299B1 (ko) 스냅샷을 제공하는 파일 시스템에 대한 계층적 저장 관리
CA2504322C (en) Apparatus and method for hardware-based file system
US6449695B1 (en) Data cache using plural lists to indicate sequence of data storage
US5239647A (en) Data storage hierarchy with shared storage level
US6651075B1 (en) Support for multiple temporal snapshots of same volume
US7069393B2 (en) Storage system providing file aware caching and file aware remote copy
JP2007133471A (ja) ストレージ装置及びスナップショットのリストア方法
US20100153651A1 (en) Efficient use of memory and accessing of stored records
US6629203B1 (en) Alternating shadow directories in pairs of storage spaces for data storage
US5802557A (en) System and method for caching information in a digital data storage subsystem
CA2216723C (en) Real time data migration system and method employing sparse files
US7533225B1 (en) Method and apparatus for enabling adaptive endianness
JPH07182225A (ja) Ｏｓリソースのオンライン増減設方式
MXPA97007374A (en) Real-time data migration system ymetodo that uses esca files

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee