RU2190248C2 - Система перемещения данных в реальном времени и способ применения разреженных файлов - Google Patents

Система перемещения данных в реальном времени и способ применения разреженных файлов Download PDF

Info

Publication number
RU2190248C2
RU2190248C2 RU97117860/09A RU97117860A RU2190248C2 RU 2190248 C2 RU2190248 C2 RU 2190248C2 RU 97117860/09 A RU97117860/09 A RU 97117860/09A RU 97117860 A RU97117860 A RU 97117860A RU 2190248 C2 RU2190248 C2 RU 2190248C2
Authority
RU
Russia
Prior art keywords
file
data file
data
service
storage device
Prior art date
Application number
RU97117860/09A
Other languages
English (en)
Other versions
RU97117860A (ru
Inventor
Вай Танг Лэм
Original Assignee
Чейенн Софтвэа Интернешнл Сэйлс Корп.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Чейенн Софтвэа Интернешнл Сэйлс Корп. filed Critical Чейенн Софтвэа Интернешнл Сэйлс Корп.
Publication of RU97117860A publication Critical patent/RU97117860A/ru
Application granted granted Critical
Publication of RU2190248C2 publication Critical patent/RU2190248C2/ru

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/185—Hierarchical storage management [HSM] systems, e.g. file migration or policies thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99951—File or database maintenance
    • Y10S707/99952—Coherency, e.g. same view to multiple users
    • Y10S707/99953—Recoverability
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99951—File or database maintenance
    • Y10S707/99952—Coherency, e.g. same view to multiple users
    • Y10S707/99955—Archiving or backup

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Traffic Control Systems (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Storage Device Security (AREA)
  • Communication Control (AREA)

Abstract

Изобретение относится к способу управления иерархической памятью в компьютерной сети. Техническим результатом является обеспечение перемещения файла данных и его обратного перемещения в памяти компьютерной сети без использования фиктивного файла. Способ для перемещения данных в реальном времени в сетевой компьютерной системе использует признак операционной системы - разреженный файл - для представления перемещенного файла. Расширенный файл занимает минимальную величину физического пространства в служебном файловом процессоре, но определяется как имеющий те же размер и атрибуты, что и исходный файл. Когда пользователь обращается к перемещенному файлу, этот файл кажется постоянно присутствующим в служебном файловом процессоре и прозрачно возвращается в служебный файловый процессор из оптимизированного положения хранения в системе управления иерархической памятью. 7 з.п. ф-лы, 6 ил., 3 табл.

Description

Область изобретения
Настоящее изобретение относится к системе и способу управления иерархической памятью во включенной в сеть компьютерной системе. Конкретнее, настоящее изобретение относится к способу автоматического и прозрачного перемещения данных из служебного файлового процессора во вспомогательное запоминающее устройство.
Существующий уровень техники
Системы управления данными на основе сервера становятся стандартным учрежденческим оборудованием, и быстро возрастает потребность в управлении данными. Сегодня многие служащие в больших корпорациях имеют персональный компьютер (ПК) или рабочую станцию, которая соединена с другими компьютерами по локальной вычислительной сети (ЛВС).
ЛВС в общем случае включает в себя множество компьютерных систем, таких как компьютерные рабочие станции, которые соединены вместе для совместного использования данных и ресурсов, таких как общая память и/или принтер. ЛВС часто включает в себя служебные файловые процессоры, обеспечивающие сетевое обслуживание. Служебный файловый процессор представляет собой в общем случае узел, например компьютер, в компьютерной сети, который обеспечивает компьютерным терминалам в сети обслуживание с помощью управления совместно используемым ресурсом. К примеру, служебный файловый процессор может управлять набором запоминающих дисков и обеспечивать обслуживание по хранению и архивированию компьютерным терминалам в сети, не имеющим собственных дисков, или имеющим данные, которые требуется хранить во внешней памяти.
Потребности ЛВС в памяти растут с ошеломляющей скоростью. Многие сегодняшние серверы оперируют с гигабайтами данных. Кроме того, способность хранить и защищать данные стала критическим вопросом для многих сетевых пользователей. Наиболее общий путь защиты данных состоит в том, чтобы держать их более чем в одном месте. Системы управления данными на основе сервера, такие как система ARCserve® управления данными, обеспечивает резервирование и защиту данных в служебном файловом процессоре ЛВС и/или компьютерных системах, подключенных к ЛВС.
Однако просто обеспечить резервирование и хранение данных из компьютерной сети недостаточно. В частности, внешнему хранению данных надлежит быть автоматическим, оптимальным и прозрачным для сетевого пользователя. Одним методом для обеспечения эффективного внешнего запоминания данных из компьютерной сети является управление иерархической памятью (УИП).
УИП включает в себя запоминание данных компьютерной сети, внешних для служебного файлового процессора в иерархии вторичных и, возможно, третичных запоминающих устройств. Внешние запоминающие устройства являются в общем случае запоминающими устройствами большой емкости, такими как оптическое с однократной записью, перезаписываемое оптическое и магнитная лента. К примеру, оптическое запоминающее устройство и привод магнитной ленты могут быть соединены со служебным файловым процессором как вторичное и третичное запоминающие устройства соответственно. На основе установленного приложением УИП критерия данные, запомненные в служебном файловом процессоре, могут перемещаться в оптическое запоминающее устройство и - на основе выбираемого критерия - перемещаться далее на привод ленты.
К примеру, в качестве критерия для перемещения данных из служебного файлового процессора во вторичное и третичное запоминающие устройства может применяться частота использования данных. За счет перемещения данных, которые используются или выбираются нечасто, можно освободить пространство в служебном файловом процессоре, хотя пользователи продолжают поиск файлов, как если бы они все еще оставались в служебном файловом процессоре. Перемещение относится к передвижению данных из служебного файлового процессора в иерархию памяти (например, внешние запоминающие устройства). Обратное перемещение относится к извлечению данных из иерархии памяти в служебный файловый процессор.
Для получения оптимальной выгоды от приложения УИП вторичное или третичное запоминающие устройства упорядочены в иерархической компоновке для хранения данных. Таким образом, файл данных, который остается в сетевом служебном файловом процессоре в течение заранее заданного периода времени, может переместиться сначала во вторичное запоминающее устройство, которое предназначено для времени относительно частых откликов, когда к файлу обращается сетевой служебный файловый процессор. Если файл данных остается в оптическом запоминающем устройстве в течение заранее заданного периода времени без обращения к нему служебного файлового процессора, то этот файл данных может переместиться далее, в соответствии с иерархией памяти, в запоминающее устройство на магнитной ленте, которое имеет относительно медленное время отклика по сравнению с оптическим запоминающим устройством. Таким образом, система управления иерархической памятью предназначена для более эффективного способа хранения файлов данных сетевой компьютерной системы на основе стоимости, скорости и емкости иерархии запоминающих устройств.
Когда файл перемещается из служебного файлового процессора, исходный файл представляется в служебном файловом процессоре как фиктивный файл, называемый также фантомным файлом или надгробием. Фиктивный файл представляет исходный файл, используя минимальное физическое пространственное размещение, тем самым освобождая как можно больше места в файловом средстве. Фиктивный файл, однако, должен также как можно точнее представлять свойства исходного файла, например размер файла, дату создания, дату последнего обращения, или некоторые признаки, такие как защищенный от записи файл. Но в зависимости от конкретного выполнения УИП, которое осуществляет перемещение, размер файла не представляется точно. Наоборот, фиктивный файл, остающийся в служебном файловом процессоре, имеет размер 0,422 или 1000 байтов независимо от действительной длины исходного файла. К примеру, 100-мегабайтовый файл может быть перемещен из сетевого служебного файлового процессора во внешнее запоминающее устройство, а оставленный в служебном файловом процессоре фиктивный файл в общем случае будет иметь размер 0,422 или 1000 байтов.
Таким образом, известные выполнения перемещений могут снизить физическое пространственное размещение служебного файлового процессора путем использования фиктивных файлов для представления перемещенного файла, но известные способы перемещения неточно представляют действительные свойства исходного файла. Точность представления, особенно размер исходного файла представляет собой важную информацию для любого приложения, где используется размер файла. К примеру, некоторые программные приложения ЛВС пытаются обеспечить статистический анализ количества данных, которыми обладает служебный файловый процессор, либо выполнить некоторые заказные функции на основании размеров конкретных файлов, достигающих заранее заданной величины. Если перемещенные файлы имеют неточное представление, этот анализ или заказные функции не могут быть выполнены должным образом. Кроме того, команда DIR операционной системы
Figure 00000002
например, выдаст пользователю неверный размер файла и приведет пользователя к путанице относительно действительного размера файла. Аналогично, команда COPY операционной системы
Figure 00000003
может показать 1000-байтовый размер для перемещенного файла, который в действительности составляет 2 мегабайта, тем самым заставляя пользователя пытаться скопировать этот файл на дискету, которая слишком мала для этого.
Выполнение УИП в общем случае специализировано для конкретных операционных систем ЛВС. К примеру, операционная система NetWare® компании NOVELL® используется во многих системах ЛВС. Существует несколько версий операционной системы NetWare®, включая версии 3.х и 4.х.
К примеру, в версии 4.х операционной системы NetWare® включено средство Перемещение Данных в Реальном Времени (ПДРВ). При использовании этого средства содержимое файла в служебном файловом процессоре NetWare® (например, в служебном файловом процессоре, работающем в операционной системе NetWare®) может быть перемещено во вторичное запоминающее устройство с компонентом файлового каталога, представляющим перемещенный файл оставленным в служебном файловом процессоре. Этот компонент файлового каталога пуст и, таким образом, не занимает физического пространства в служебном файловом процессоре NetWare®. Кроме того, этот компонент файлового каталога будет указывать правильные свойства перемещенного файла, включая действительный размер этого перемещенного файла. Когда перемещенный файл запрашивается служебным файловым процессором, файл будет автоматически извлекаться в служебный файловый процессор.
Таким образом, ПДРВ версии 4.х операционной системы NetWare® обеспечивает инструмент для автоматического и прозрачного перемещения файлов из объема NetWare® во вторичное хранилище, сохраняя при этом точные компоненты каталога в исходном объеме NetWare® для перемещенных файлов. С другой стороны, версии 3. х операционной системы NetWare®, к примеру, не обеспечивают функциональных возможностей перемещения. Соответственно, продавцы программного обеспечения должны создавать функцию перемещения данных для служебных файловых процессоров версий 3.х операционной системы NetWare®. Однако известные приложения перемещения не обеспечивают компоненты каталога в служебном файловом процессоре, которая является точным представлением перемещенного файла; в зависимости от приложения остающаяся компонента каталога будет фиктивным файлом, имеющим размер 0,422 или 1000 байтов, вместо действительного размера перемещенного файла.
Цель настоящего изобретения состоит в том, чтобы обеспечить перемещение данных из, к примеру, служебного файлового процессора версий 3.х операционной системы NetWare®, которое исключает использование фиктивного файла, не дающего точного представления размера перемещенного файла. Другая цель настоящего изобретения состоит в обеспечении перемещения и обратного перемещения файла, которые абсолютно прозрачны для пользователя.
Раскрытие изобретения
Система и способ согласно настоящему изобретению используют известное средство операционных систем - разреженный файл - для представления перемещенного файла. Разреженный файл представляет собой файл, который имеет физический размер (например, физическое размещение) меньше, чем его логический, или кажущийся, размер. Разреженный файл, таким образом, минимизирует физическое пространство, занимаемое файлом, сохраняя при этом действительные свойства файла, такие как размер и дата создания. Разреженный файл может также удалить все блоки данных исходного файла и определяться как имеющий файловый размер, равный исходному файлу, точно представляя, таким образом, исходный файл и не занимая при этом практически никакого пространства.
В соответствии с системой и способом настоящего изобретения, когда файл перемещается из служебного файлового процессора в запоминающую среду, этот подлежащий перемещению файл заменяется в служебном файловом процессоре разреженным файлом, определенным как имеющий те же самые логический размер и признаки, что и исходный файл. Разреженный файл, однако, занимает лишь минимальное пространство, требуемое для хранения файла, например один блок данных. Ключевая информация перемещения запоминается в разреженном файле так, чтобы служебный файловый процессор мог извлечь перемещенный файл, когда он запрашивается пользователем. Когда пользователь запрашивает перемещенный файл, этот файл представляется остающимся в служебном файловом процессоре с действительными свойствами файла и автоматически и прозрачно переносится обратно в служебный файловый процессор из вторичной или третичной запоминающей среды. Таким образом, настоящее изобретение исключает использование фиктивного файла, имеющего заранее заданный и неточный размер для представления перемещенного файла.
Краткое описание чертежей
Фиг.1 показывает систему локальной вычислительной сети, использующую систему управления иерархической памятью согласно настоящему изобретению.
Фиг.2 представляет собой иллюстративную блок-схему алгоритма способа перемещения данных в реальном времени, использующего разреженные файлы согласно настоящему изобретению.
Фиг. 3 представляет собой иллюстративную блок-схему алгоритма способа согласно настоящему изобретению для перемещения данных в реальном времени с использованием разреженных файлов согласно настоящему изобретению.
Фиг.4А показывает файл данных, имеющий логический размер.
Фиг. 4В показывает обычное представление разреженного файла для файла, показанного на фиг.4А.
Фиг. 4С показывает представление разреженного файла для файла, показанного на фиг.4А, согласно настоящему изобретению.
Подробное описание изобретения
Фиг.1 представляет систему 1 ЛВС, включающую в себя систему 2 УИП согласно настоящему изобретению. Система 2 УИП обеспечивает возможности УИП, например, для среды версий 3.х операционной системы NetWare® и включает в себя служебный файловый процессор 10, именуемый также первичным запоминающим устройством, связанный со вторичным запоминающим устройством 20. Вторичное запоминающее устройство 20 связано далее с третичным запоминающим устройством 30. За счет оптимального использования служебного файлoвого процессора 10, вторичного запоминающего устройства 20 и третичного запоминающего устройства 30 система 2 УИП может автоматически и прозрачно запоминать иерархически, например, гигабайты данных.
Система 1 ЛВС имеет, к примеру, архитектуру клиент - сервер. Клиент представляет собой, например, множество рабочих станций 40, связанных со служебным файловым процессором 10. Рабочая станция 40 включает в себя, к примеру, основанную на микропроцессоре компьютерную систему. По меньшей мере одна из рабочих станций 40 обеспечивает интерфейс для пользователя, чтобы устанавливать критерии перемещения для перемещения данных из служебного файлового процессора 10. Серверная сторона включает в себя служебный файловый процессор 10, имеющий машину 11 перемещения, которая обеспечивает услугу прозрачного перемещения данных из служебного файлового процессора 10 и услугу обратного перемещения в служебный файловый процессор 10.
Машина 11 перемещения, к примеру, периодически просматривает и опознает неактивные файлы согласно заранее заданным критериям. Если файлы опознаны для перемещения, эти файлы перемещаются во вторичную иерархию системы 2 УИП, что дает в результате дополнительное запоминающее пространство для активных файлов в служебном файловом процессоре 10. Система 2 УИП затем управляет перемещенными файлами в иерархии памяти до тех пор, пока не достигается наинизший уровень иерархии памяти.
Согласно фиг. 1 серверная сторона включает в себя, к примеру, три различных модуля. Первый модуль представляет собой служебный файловый процессор 10, из которого желательно передвинуть заранее выбранные файлы, такие как нечасто запрашиваемые файлы, в менее дорогие запоминающие устройства. Второй модуль представляет собой вторичное запоминающее устройство 20, такое как Оптическая Ступень, которое поддерживает оптическое запоминающее устройство. Оптическая Ступень может быть в том же самом или отличающемся сервере операционной системы NetWare®, что и служебный файловый процессор 10. Третий модуль представляет собой третичное запоминающее устройство 30, такое как Ступень Магнитной Ленты, которая поддерживает блок обмена на магнитной ленте. Ступень Магнитной Ленты может быть в том же самом или отличающемся сервере операционной системы NetWare®, что и служебный файловый процессор 10 или Оптическая Ступень 20. Второй и третий модули вместе образуют иерархию памяти. В общем случае каждая ступень в иерархии памяти является однородным собранием запоминающих сред, например все среды в ступени имеют одинаковые физические свойства. Связь между ступенями осуществляется через собственный протокол связи операционной системы NetWare®, такой как IPX, SPX, TLI или TCP/IP. Кроме того, по желанию ко вторичному запоминающему устройству 20 и третичному запоминающему устройству 30, показанным на фиг.1, могут быть добавлены дополнительные ступени запоминания в систему УИП.
Оптическое запоминающее устройство 20, такое как Перезаписываемое Оптическое устройство, в общем случае имеет время обращения в диапазоне 5-10 секунд, поскольку запоминающая среда является удаляемой и обычно требует установки в дисковод и раскрутки перед тем, как к ней можно обратиться. Для автоматической работы оптической памяти может использоваться оптический автомат; в противном случае оператор должен вручную обслуживать запросы на загрузку сред. Запоминающее устройство 30 на магнитной ленте, такое как Привод 8-миллиметровой Ленты компании Hewlett-Packard, может иметь время обращения в несколько минут, поскольку запоминающая среда является удаляемой и обычно требует установки в привод перед тем, как к ней можно обратиться. Для автоматической работы может использоваться автоматическое устройство смены лент; в противном случае оператор должен вручную обслуживать запросы на загрузку сред.
Каждая ступень в примерной иерархии памяти, показанной на фиг.1, управляется средствами 21, 31 перемещения ступени соответственно. Средства 21, 31 перемещения ступени включают в себя, к примеру, вспомогательную программу, постоянно находящуюся в служебном файловом процессоре 10 или в отдельном служебном файловом процессоре. Средства 21, 31 перемещения ступени размещены в служебном файловом процессоре, который связан с их соответствующими вторичным запоминающим устройством 20 и третичным запоминающим устройством 30. Как показано на фиг.1, средство 21 перемещения ступени размещено в служебном файловом процессоре 15, а средство 31 перемещения ступени размещено в служебном файловом процессоре 16. Каждое средство 21, 31 перемещения ступени, к примеру, управляет перемещением файлов, извлекает файлы по запросу и перемещает файлы в следующую ступень в иерархии памяти в соответствии с правилами иерархии памяти. Т. к. каждая ступень иерархии памяти имеет средство перемещения ступени, эта иерархия памяти может быть распределена, благодаря чему снижается рабочая нагрузка на служебный файловый процессор 10 через, например, служебные файловые процессоры 15 и 16.
Пользователь системы 1 ЛВС может установить, к примеру, системное задание перемещения для всего служебного файлового процессора 10, который будет периодически осуществлять просмотр для поддержания дисковой памяти в служебном файловом процессоре 10 в приемлемых пределах. Пользователь имеет также возможность осуществлять задания на перемещение по требованию и для конкретного случая или задания обратного перемещения. Все файлы из любого служебного файлового процессора 10 должны, однако, перемещаться в ту же самую иерархию памяти.
Для системного задания перемещения, т.е. перемещения данных из служебного файлового процессора 10, пользователю необходимо указать файлы/каталоги, которые являются кандидатами для перемещения. Способ выбора может быть указан пользователем согласно различным критериям. Например, параметрические переменные для перемещения данных могут включать в себя переменные данных, заранее заданные фильтры или отметки уровня, которые основаны на доступности запоминания в конкретном устройстве.
Параметрические переменные данных задаются для перемещения файлов из служебного файлового процессора 10 на основании, к примеру, данных о том, когда было последнее обращение к файлу, данных о том, когда было последнее обновление файла, или даты создания этого файла. Заранее заданные фильтровые параметрические переменные задаются для перемещения файлов из служебного файлового процессора 10 на основании, к примеру, сопоставления с образцом для имени файла, признака файла (например, системный файл, доступный лишь для чтения файл) или заранее заданного размера файла. Параметрические переменные отметок уровня задаются для перемещения файлов из служебного файлового процессора 10 на основании величины пространства памяти, доступного на конкретном запоминающем устройстве.
При использовании параметров отметок уровня, к примеру, система 2 УИП может перемещать файлы из служебного файлового процессора 10 во вторичное запоминающее устройство 20, когда пространство памяти, доступное в служебном файловом процессоре 10, достигает отметки критического уровня, на которой немедленно осуществляется аварийное перемещение в соответствии с заранее заданными критериями перемещения, чтобы избежать ситуации "заполнения объема". Файлы будут затем перемещаться до тех пор, пока доступное пространство памяти не достигнет отметки высокого уровня (например, безопасного уровня). Отметка высокого уровня определяется, к примеру, как проценты от используемого пространства в служебном файловом процессоре 10. Когда используемое пространство ниже отметки критического уровня и выше отметки высокого уровня, файлы будут перемещаться на заранее заданное время, к примеру, на основании наименьшего числа обращений в последнее время до тех пор, пока не достигается отметка низкого уровня. Отметка низкого уровня также определяется, к примеру, как проценты от используемого пространства в служебном файловом процессоре 10. Когда используемое пространство ниже отметки низкого уровня, никакого перемещения из служебного файлового процессора 10 не происходит.
Параметры для опознавания файлов, подлежащих перемещению из служебного файлового процессора 10, могут по желанию объединяться пользователем. Когда пользователь устанавливает системное задание перемещения, он также может определить, должно ли выполняться дальнейшее перемещение, например, из вторичного запоминающего устройства 20 в третичное запоминающее устройство 30. Кроме того, пользователь может определить период времени, в течение которого перемещенный файл должен оставаться в запоминающем устройстве перед тем, как осуществить дальнейшее перемещение.
Когда файл, постоянно находящийся в служебном файловом процессоре 10, опознается для перемещения в иерархию памяти системы 2 УИП, выполняется способ согласно настоящему изобретению, представленный блок-схемой алгоритма на фиг.2. Как показано на фиг.2, процесс начинается на шаге S0, когда машина 11 перемещения генерирует команду переместить файл из служебного файлового процессора 10. На шаге S1 подлежащий перемещению файл открывается, а на шаге S2 этот файл считывается. На шаге S3 копия блоков данных подлежащего перемещению файла передается во вторичное запоминающее устройство 20. Средство 21 перемещения ступени возвращает ключ перемещения машине 11 перемещения, указывая местоположение перемещенного файла.
После того как файл передан во вторичное запоминающее устройство 20, исходный файл, который все еще остается в служебном файловом процессоре 10, отбрасывается на шаге S4. Отбрасывание исходного файла на шаге S4 освобождает блоки данных исходного файла, так что эти блоки данных становятся доступны для перераспределения служебным файловым процессором 10. В этой точке исходный файл имеет физическое размещение, к примеру, равное нулю блоков данных из-за перераспределения на шаге S4. Кроме того, действительные свойства исходного файла запоминаются машиной 11 перемещения. На шаге S5 ключ перемещения записывается в исходный файл, который теперь является разреженным файлом, имеющим физическое размещение размером, например, в один блок данных, содержащий ключ перемещения. Таким образом, физическое размещение разреженного файла меньше, чем логический размер исходного файла. На шаге S6 машина 11 перемещения определяет исходный файл как имеющий логический размер, равный действительному файловому размеру исходного файла, тем самым создавая разреженный файл с физическим размещением размером в один блок, но с логическим размером, равным местоположению исходного файла. Процесс перемещения завершается на шаге S7, когда машина 11 перемещения выходит из процесса перемещения.
Обычная работа разреженного файла иллюстрируется на фиг.4А и 4В. Файл, имеющий размер в n блоков данных (блоки 0-n), только некоторые из которых содержат данные, показан на фиг.4А. Например, блоки 0, 4, 7, 10 и n данных показаны на фиг.4А содержащими данные. Файл, показанный на фиг.4В, является разреженным файлом, который представляет файл на фиг.4А. Файл на фиг.4В имеет физический размер, к примеру, в пять блоков данных, представляющих только занятые данными блоки фиг.4А. Таким образом, разреженный файл обеспечивает способ создания файла с физическим размером, который намного меньше, чем его логический размер, тем самым предотвращая избыток пространства памяти в служебном файловом процессоре 10.
Для создания разреженного файла, показанного на фиг.4В, компьютерный программист задает специальные команды, когда создает файл, которые распознаются операционной системой системы 1 ЛВС. Например, версия 3.х операционной системы NetWare® компании Novell® интерпретирует команду SEEK так, чтобы не размещать блоки данных между адресами SEEK. В противоположность этому, другие операционные системы обращаются с командой SEEK так, чтобы размещать блоки данных между адресами SEEK. Шаги, показанные ниже в таблице 1, представляют собой примерные шаги, которые могут выполняться для создания разреженного файла, представленного на фиг.4В:
Таблица 1
а) Открыть файл
б) Искать блок 0 данных
в) Записать данные блока 0 данных
г) Искать блок 4 данных
д) Записать данные блока 4 данных
е) Искать блок 7 данных
ж) Записать данные блока 7 данных
з) Искать блок 10 данных
и) Записать данные блока 10 данных
к) Искать блок n данных
л) Записать данные блока n данных
м) Закрыть файл
Соответственно, шаги, показанные в таблице 1, интерпретируются версией 3. х операционной системы NetWare® компании Novell®, чтобы размещать только блоки данных, в которых имеется запись, - таким образом создается разреженный файл, имеющий лишь пять блоков данных, представляющих занятые блоки 0, 4, 7, 10 и n данных. Разреженный файл указывает свой действительный размер, но, будучи запрошен пользователем, этот файл выдается пользователю в виде, показанном на фиг.4А, т.е. имеющим физическое размещение с размером, равным его логическому размеру.
В соответствии с настоящим изобретением признак разреженного файла, к примеру признак разреженного файла в версии 3. х операционной системы NetWare® компании Novell®, используется для представления файла, который перемещен из служебного файлового процессора 10 без включения какого-либо из занятых блоков данных исходного файла. Таким образом, как показано на фиг. 4С, разреженный файл, имеющий только один блок данных, но определенный как имеющий логический размер, равный действительному размеру файла, показанного на фиг.4А, генерируется посредством способа согласно настоящему изобретению. Пунктирные линии, показанные на фиг.4С, указывают логический размер этого файла, для которого, однако, никакие блоки данных не размещены. Таблица 2 показывает примерные шаги для создания разреженного файла по фиг.4С:
Таблица 2
а) Открыть файл
б) Записать ключ перемещения
в) Искать действительный размер исходного файла
г) Записать "0"
д) Закрыть файл
В соответствии с настоящим изобретением признак разреженного файла операционной системы NetWare® компании Novell® используется для минимизации физического размещения, необходимого для представления перемещенного файла в служебном файловом процессоре 10, сохраняя при этом действительные свойства исходного файла. Соответственно, после того как исходный файл скопирован и послан во вторичное запоминающее устройство 20, а затем отброшен, остающийся в служебном файловом процессоре 10 файл может обрабатываться посредством примерных шагов, описанных в таблице 2. Шаг б), который реализует операцию "Искать действительный размер исходного файла", определяет разреженный файл как имеющий логический размер, равный физическому размеру исходного файла. Отбрасывание исходного файла, однако, снижает физический размер, занимаемый разреженным файлом в служебном файловом процессоре 10.
В дополнение к шагам, показанным в таблице 2, другой набор примерных шагов для создания разреженного файла согласно настоящему изобретению показан в таблице 3:
Таблица 3
а) Открыть файл
б) Записать ключ перемещения
в) Изменить размер на действительный размер файла
г) Закрыть файл
Операция "Изменить размер" может выполняться для определения логического размера разреженного файла, потому что после отбрасывания исходного файла в служебном файловом процессоре 10 отсутствуют блоки данных, на которые могла бы воздействовать операция "Изменить размер". Поэтому способ согласно настоящему изобретению использует известный признак операционной системы - разреженный файл - для представления перемещенного файла в служебном файловом процессоре 10, причем разреженный файл имеет минимальный физический размер, в то время как он определен как имеющий действительные свойства перемещенного файла.
Когда файл перемещен из служебного файлового процессора 10 в систему 2 УИП, файл извлекается при обратном перемещении в служебный файловый процессор 10. Обратное перемещение происходит, к примеру, когда пользователь обращается к перемещенному файлу, и служебный файловый процессор 10 запрашивает файл через машину 11 перемещения. Как показано на фиг.3, процесс обратного перемещения начинается на шаге S10, когда перемещенный файл запрашивается служебным файловым процессором 10.
На шаге S10A машина 11 перемещения считывает информацию ключа перемещения, запомненную в разреженном файле, для определения местоположения перемещенного файла. На шаге S10B машина 11 перемещения посылает ключ перемещения на средство 21 перемещения ступени. Средство 21 перемещения ступени использует ключ перемещения ступени для определения на шаге S10C того, расположен ли запрошенный файл во вторичном запоминающем устройстве 20 или перемещен дальше в третичное запоминающее устройство 30. Когда на шаге S10D файл находится, этот файл посылается служебному файловому процессору 10 через машину 11 перемещения. На шаге S11 машина 11 перемещения считывает данные запрошенного файла.
После того как данные из перемещенного файла считаны, разреженный файл открывается на шаге S12 машиной 11 перемещения. На шаге S13 содержимое исходного файла, извлеченного из системы 2 УИП, загружается в разреженный файл, преобразуя разреженный файл обратно в исходный файл, имеющий исходное физическое размещение. Таким образом, после шага S13 исходный файл снова постоянно находится в служебном файловом процессоре 10 в своем исходном виде (например, перед перемещением). Вдобавок пользователь не был осведомлен, что компонентой каталога служебного файлового процессора 10 был в действительности разреженный файл, не содержащий действительных данных исходного файла, но лишь ограниченную описательную информацию. Кроме того, обратное перемещение перемещенного файла является автоматическим и прозрачным для пользователя.
На шаге S14 информация ключа перемещения, хранившаяся до этого в разреженном файле, который более не существует в служебном файловом процессоре 10, а существует в иерархии памяти, потому что из этой иерархии памяти извлечена только копия исходного файла, запоминается, к примеру, в Расширенном Атрибуте (РА) операционной системы NetWare® компании Novell®. Если извлеченный файл не изменен и ранее опознан для перемещения, прежний ключ перемещения будет использоваться для предотвращения ненужной передачи данных в иерархию памяти, поскольку этот файл уже хранился во внешнем запоминающем устройстве. В этом случае в служебном файловом процессоре 10 будет создаваться только разреженный файл. На шаге S15 машина 11 перемещения выходит из процесса обратного перемещения.

Claims (8)

1. Способ перемещения файла данных в компьютерной сети из первого запоминающего устройства во второе запоминающее устройство, включающий передачу и запись содержимого файла данных, имеющего первый фактический размер из первого запоминающего устройства во второе запоминающее устройство, укорачивание файла данных путем деадресации блоков данных и создание на первом запоминающем устройстве разреженного файла данных, логический размер которого равен первому фактическому размеру, а реальный размер которого меньше первого реального размера, запись в разреженный файл данных первого запоминающего устройства ключа перемещения, определяющего местоположение переданного файла данных.
2. Способ по п. 1, отличающийся тем, что дополнительно осуществляют перемещение данных из второго запоминающего устройства в третье запоминающее устройство как функцию заранее заданной иерархии хранения данных.
3. Способ по п. 1, отличающийся тем, что компьютерная сеть использует версию 3-х операционной системы Novell NetWare.
4. Способ по п. 1, отличающийся тем, что при создании разреженного файла данных дополнительно проводят операцию открытия файла данных, первую операцию записи в файле данных, операцию поиска в файле данных, вторую операцию записи в файле данных и операцию закрытия файла данных.
5. Способ по п. 4, отличающийся тем, что операция поиска включает поиск первого реального размера.
6. Способ по п. 4, отличающийся тем, что при первой операции записи записывают ключ перемещения в файл данных.
7. Способ по п. 1, отличающийся тем, что при создании разреженного файла данных дополнительно проводят операцию открытия файла данных, первую операцию записи в файле данных, операцию изменения размера в файле данных и операцию закрытия файла данных.
8. Способ по п. 7, отличающийся тем, что операция изменения размера осуществляет изменение размера до первого реального размера.
RU97117860/09A 1995-03-29 1996-03-29 Система перемещения данных в реальном времени и способ применения разреженных файлов RU2190248C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US08/413,056 US5564037A (en) 1995-03-29 1995-03-29 Real time data migration system and method employing sparse files
US08/413,056 1995-03-29

Publications (2)

Publication Number Publication Date
RU97117860A RU97117860A (ru) 1999-10-27
RU2190248C2 true RU2190248C2 (ru) 2002-09-27

Family

ID=23635640

Family Applications (1)

Application Number Title Priority Date Filing Date
RU97117860/09A RU2190248C2 (ru) 1995-03-29 1996-03-29 Система перемещения данных в реальном времени и способ применения разреженных файлов

Country Status (11)

Country Link
US (1) US5564037A (ru)
EP (1) EP0818006B1 (ru)
JP (1) JPH11511272A (ru)
KR (1) KR100446339B1 (ru)
CN (1) CN1079552C (ru)
AT (1) ATE328324T1 (ru)
AU (1) AU694022B2 (ru)
BR (1) BR9608000A (ru)
DE (1) DE69636192T2 (ru)
RU (1) RU2190248C2 (ru)
WO (1) WO1996030839A1 (ru)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2488876C2 (ru) * 2005-04-20 2013-07-27 Акссана (Израэль) Лтд. Способ и устройство защиты данных
RU2751798C2 (ru) * 2019-12-31 2021-07-19 Банк ВТБ (публичное акционерное общество) Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц

Families Citing this family (143)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5909700A (en) * 1996-12-23 1999-06-01 Emc Corporation Back-up data storage facility incorporating filtering to select data items to be backed up
US5873103A (en) * 1994-02-25 1999-02-16 Kodak Limited Data storage management for network interconnected processors using transferrable placeholders
US5678044A (en) * 1995-06-02 1997-10-14 Electronic Data Systems Corporation System and method for improved rehosting of software systems
US5680640A (en) 1995-09-01 1997-10-21 Emc Corporation System for migrating data by selecting a first or second transfer means based on the status of a data element map initialized to a predetermined state
US5799324A (en) * 1996-05-10 1998-08-25 International Business Machines Corporation System and method for management of persistent data in a log-structured disk array
US5933653A (en) * 1996-05-31 1999-08-03 Emc Corporation Method and apparatus for mirroring data in a remote data storage system
US5835954A (en) * 1996-09-12 1998-11-10 International Business Machines Corporation Target DASD controlled data migration move
US6038665A (en) * 1996-12-03 2000-03-14 Fairbanks Systems Group System and method for backing up computer files over a wide area computer network
US5794254A (en) * 1996-12-03 1998-08-11 Fairbanks Systems Group Incremental computer file backup using a two-step comparison of first two characters in the block and a signature with pre-stored character and signature sets
US5822780A (en) * 1996-12-31 1998-10-13 Emc Corporation Method and apparatus for hierarchical storage management for data base management systems
JPH10224665A (ja) * 1997-02-04 1998-08-21 Sony Corp 送出システム
JP3734334B2 (ja) * 1997-05-07 2006-01-11 富士通株式会社 データ移行システム、データ移行用プログラムを格納したコンピュータ読み取り可能な記録媒体、及びデータ移行方法
US6366988B1 (en) 1997-07-18 2002-04-02 Storactive, Inc. Systems and methods for electronic data storage management
US5983368A (en) * 1997-08-26 1999-11-09 International Business Machines Corporation Method and system for facilitating hierarchical storage management (HSM) testing
US6145068A (en) * 1997-09-16 2000-11-07 Phoenix Technologies Ltd. Data transfer to a non-volatile storage medium
US6704553B1 (en) * 1997-10-08 2004-03-09 Thomas M. Eubanks System and method for providing automatic tuning of a radio receiver and for providing automatic control of a CD/tape player
US6145066A (en) * 1997-11-14 2000-11-07 Amdahl Corporation Computer system with transparent data migration between storage volumes
US6105037A (en) 1997-12-12 2000-08-15 International Business Machines Corporation Apparatus for performing automated reconcile control in a virtual tape system
US5953729A (en) 1997-12-23 1999-09-14 Microsoft Corporation Using sparse file technology to stage data that will then be stored in remote storage
US6088805A (en) * 1998-02-13 2000-07-11 International Business Machines Corporation Systems, methods and computer program products for authenticating client requests with client certificate information
DE69920363T2 (de) * 1998-04-27 2005-09-29 Sony Corp. Daten aufnahme/wiedergabgabegerät und verfahren hierfür
US6757705B1 (en) * 1998-08-14 2004-06-29 Microsoft Corporation Method and system for client-side caching
US6199194B1 (en) * 1998-09-25 2001-03-06 Adaptec, Inc. Method and system for programming firmware over a computer network
US6378128B1 (en) * 1998-10-08 2002-04-23 Microsoft Corporation System and method for dynamically modifying an install-set
US6442601B1 (en) * 1999-03-25 2002-08-27 International Business Machines Corporation System, method and program for migrating files retrieved from over a network to secondary storage
US7035880B1 (en) 1999-07-14 2006-04-25 Commvault Systems, Inc. Modular backup and retrieval system used in conjunction with a storage area network
US6938058B2 (en) * 1999-08-23 2005-08-30 Eisenworld, Inc. Apparatus and method for transferring information between platforms
GB0002019D0 (en) * 2000-01-29 2000-03-22 Ibm Data migration tool
US6658436B2 (en) 2000-01-31 2003-12-02 Commvault Systems, Inc. Logical view and access to data managed by a modular data and storage management system
US7003641B2 (en) 2000-01-31 2006-02-21 Commvault Systems, Inc. Logical view with granular access to exchange data managed by a modular data and storage management system
US7434219B2 (en) 2000-01-31 2008-10-07 Commvault Systems, Inc. Storage of application specific profiles correlating to document versions
US6795835B2 (en) * 2000-05-19 2004-09-21 Centerbeam, Inc. Migration of computer personalization information
US6952730B1 (en) * 2000-06-30 2005-10-04 Hewlett-Packard Development Company, L.P. System and method for efficient filtering of data set addresses in a web crawler
US6751635B1 (en) * 2000-08-18 2004-06-15 Network Appliance, Inc. File deletion and truncation using a zombie file space
US6981005B1 (en) * 2000-08-24 2005-12-27 Microsoft Corporation Partial migration of an object to another storage location in a computer system
JP2005530242A (ja) * 2000-09-11 2005-10-06 アガミ システムズ， インコーポレイテッド 区画された移動可能メタデータを有する記憶システム
JP4627110B2 (ja) * 2000-10-16 2011-02-09 富士通株式会社 データ記憶装置
US7281010B2 (en) * 2000-11-15 2007-10-09 Lenovo (Singapore) Pte. Ltd. Trusted computing platform with dual key trees to support multiple public/private key systems
US7047420B2 (en) 2001-01-17 2006-05-16 Microsoft Corporation Exclusive encryption
US6990667B2 (en) 2001-01-29 2006-01-24 Adaptec, Inc. Server-independent object positioning for load balancing drives and servers
US7043637B2 (en) * 2001-03-21 2006-05-09 Microsoft Corporation On-disk file format for a serverless distributed file system
US6981138B2 (en) 2001-03-26 2005-12-27 Microsoft Corporation Encrypted key cache
US7062490B2 (en) 2001-03-26 2006-06-13 Microsoft Corporation Serverless distributed file system
US6988124B2 (en) * 2001-06-06 2006-01-17 Microsoft Corporation Locating potentially identical objects across multiple computers based on stochastic partitioning of workload
US7546354B1 (en) * 2001-07-06 2009-06-09 Emc Corporation Dynamic network based storage with high availability
US8442957B2 (en) * 2001-09-26 2013-05-14 Emc Corporation Efficient management of large files
US8640136B2 (en) * 2001-09-26 2014-01-28 Emc Corporation Sharing objects between computer systems
JP2005505039A (ja) * 2001-09-28 2005-02-17 コムヴォールト・システムズ・インコーポレーテッド 情報記憶装置にオブジェクトをアーカイブする装置及び方法
JP4176341B2 (ja) * 2001-10-23 2008-11-05 株式会社日立製作所 記憶制御装置
EP1589412A3 (en) * 2001-11-13 2008-12-31 Hitachi, Ltd. Computer data migration system
JP4168626B2 (ja) * 2001-12-06 2008-10-22 株式会社日立製作所 記憶装置間のファイル移行方法
JP2003237914A (ja) * 2002-02-15 2003-08-27 Hitachi Ltd 記憶メディア保管システム及びその運用方法
DE10211606B4 (de) * 2002-03-12 2017-06-08 Kip Cr P1 Lp Datenverarbeitungseinrichtung mit einem Metadatensicherungsmanagement
US6964833B2 (en) * 2002-05-31 2005-11-15 Samsung Electronics Co., Ltd. Linked dihydrazone-based charge transport compounds
CA2489142C (en) 2002-06-20 2013-11-26 Paul Francis Mckee Distributed computer
US7937430B1 (en) 2002-07-31 2011-05-03 At&T Intellectual Property I, L.P. System and method for collecting and transmitting data in a computer network
KR100457046B1 (ko) * 2002-08-07 2004-11-10 삼성전자주식회사 반도체 장치의 제조에서 콘택 형성 방법
JP2005538470A (ja) * 2002-09-10 2005-12-15 イグザグリッド システムズ， インコーポレイテッド ノーダルフェイルオーバを用いるプライマリーデータバックアップおよびリモートデータバックアップ
GB0230331D0 (en) 2002-12-31 2003-02-05 British Telecomm Method and apparatus for operating a computer network
US6981117B2 (en) 2003-01-29 2005-12-27 International Business Machines Corporation Method, system, and program for transferring data
JP4267353B2 (ja) 2003-03-28 2009-05-27 株式会社日立製作所 データ移行支援システム、および、データ移行支援方法
JP2004318743A (ja) * 2003-04-21 2004-11-11 Hitachi Ltd ファイル移送装置
US7454569B2 (en) 2003-06-25 2008-11-18 Commvault Systems, Inc. Hierarchical system and method for performing storage operations in a computer network
EP1661039A2 (en) * 2003-08-29 2006-05-31 Koninklijke Philips Electronics N.V. File migration history controls updating of pointers
US7734690B2 (en) * 2003-09-05 2010-06-08 Microsoft Corporation Method and apparatus for providing attributes of a collaboration system in an operating system folder-based file system
US7546324B2 (en) 2003-11-13 2009-06-09 Commvault Systems, Inc. Systems and methods for performing storage operations using network attached storage
JP2005165486A (ja) * 2003-12-01 2005-06-23 Sony Corp ファイル管理装置、ストレージ管理システム、ストレージ管理方法、プログラム及び記録媒体
US20050216532A1 (en) * 2004-03-24 2005-09-29 Lallier John C System and method for file migration
GB0412655D0 (en) * 2004-06-07 2004-07-07 British Telecomm Distributed storage network
JP2006079273A (ja) * 2004-09-08 2006-03-23 Sony Corp ファイル管理装置、ネットワークシステム、ファイル管理方法及びプログラム
JP4349301B2 (ja) * 2004-11-12 2009-10-21 日本電気株式会社 ストレージ管理システムと方法並びにプログラム
US20060136525A1 (en) * 2004-12-21 2006-06-22 Jens-Peter Akelbein Method, computer program product and mass storage device for dynamically managing a mass storage device
US7831639B1 (en) * 2004-12-22 2010-11-09 Symantec Operating Corporation System and method for providing data protection by using sparse files to represent images of data stored in block devices
US20060230136A1 (en) * 2005-04-12 2006-10-12 Kenneth Ma Intelligent auto-archiving
US7853667B1 (en) * 2005-08-05 2010-12-14 Network Appliance, Inc. Emulation of transparent recall in a hierarchical storage management system
US7464114B2 (en) * 2005-09-27 2008-12-09 International Business Machines Corporation Method and apparatus to capture and transmit dense diagnostic data of a file system
US20070130232A1 (en) * 2005-11-22 2007-06-07 Therrien David G Method and apparatus for efficiently storing and managing historical versions and replicas of computer data files
JP4563314B2 (ja) * 2005-12-14 2010-10-13 富士通株式会社 ストレージシステム制御装置、ストレージシステム制御プログラム、ストレージシステム制御方法
US7552300B2 (en) * 2006-01-03 2009-06-23 International Business Machines Corporation Method for migrating objects in content management systems through exploitation of file properties, temporal locality, and spatial locality
JP4908849B2 (ja) * 2006-01-11 2012-04-04 富士通セミコンダクター株式会社 ファイル削除方法、ファイル・オープン方法、ファイル削除プログラム、および、ファイル・オープン・プログラム
US7543128B2 (en) * 2006-07-25 2009-06-02 Hewlett-Packard Development Company, L.P. Method and apparatus for repurposing compute resources to implement, or not implement, storage access protocols
US7734669B2 (en) 2006-12-22 2010-06-08 Commvault Systems, Inc. Managing copies of data
US8738588B2 (en) * 2007-03-26 2014-05-27 International Business Machines Corporation Sequential media reclamation and replication
US7720819B2 (en) * 2007-04-12 2010-05-18 International Business Machines Corporation Method and apparatus combining revision based and time based file data protection
JP4375435B2 (ja) 2007-05-23 2009-12-02 株式会社日立製作所 予知型データ移行を行う階層ストレージシステム
US7685186B2 (en) * 2007-06-25 2010-03-23 Microsoft Corporation Optimized and robust in-place data transformation
US8249257B2 (en) * 2007-09-28 2012-08-21 Intel Corporation Virtual TPM keys rooted in a hardware TPM
US8396838B2 (en) 2007-10-17 2013-03-12 Commvault Systems, Inc. Legal compliance, electronic discovery and electronic document handling of online and offline copies of data
US8259948B2 (en) * 2007-12-29 2012-09-04 Intel Corporation Virtual TPM key migration using hardware keys
US8769048B2 (en) 2008-06-18 2014-07-01 Commvault Systems, Inc. Data protection scheduling, such as providing a flexible backup window in a data protection system
US9128883B2 (en) 2008-06-19 2015-09-08 Commvault Systems, Inc Data storage resource allocation by performing abbreviated resource checks based on relative chances of failure of the data storage resources to determine whether data storage requests would fail
US8352954B2 (en) 2008-06-19 2013-01-08 Commvault Systems, Inc. Data storage resource allocation by employing dynamic methods and blacklisting resource request pools
US8725688B2 (en) 2008-09-05 2014-05-13 Commvault Systems, Inc. Image level copy or restore, such as image level restore without knowledge of data object metadata
US20100070474A1 (en) 2008-09-12 2010-03-18 Lad Kamleshkumar K Transferring or migrating portions of data objects, such as block-level data migration or chunk-based data migration
US8359192B2 (en) * 2008-11-19 2013-01-22 Lemi Technology, Llc System and method for internet radio station program discovery
US20100257218A1 (en) * 2009-04-03 2010-10-07 Konstantin Iliev Vassilev Merging multiple heterogeneous file systems into a single virtual unified file system
US8874628B1 (en) * 2009-10-15 2014-10-28 Symantec Corporation Systems and methods for projecting hierarchical storage management functions
US9128942B1 (en) * 2010-12-24 2015-09-08 Netapp, Inc. On-demand operations
US9021198B1 (en) 2011-01-20 2015-04-28 Commvault Systems, Inc. System and method for sharing SAN storage
US8849762B2 (en) 2011-03-31 2014-09-30 Commvault Systems, Inc. Restoring computing environments, such as autorecovery of file systems at certain points in time
US9146679B2 (en) * 2011-06-18 2015-09-29 International Business Machines Corporation Effectively limitless apparent free space on storage device
US9087010B2 (en) * 2011-12-15 2015-07-21 International Business Machines Corporation Data selection for movement from a source to a target
US9779008B2 (en) * 2012-02-21 2017-10-03 Disney Enterprises, Inc. File monitoring
US10157184B2 (en) 2012-03-30 2018-12-18 Commvault Systems, Inc. Data previewing before recalling large data files
GB2504716A (en) * 2012-08-07 2014-02-12 Ibm A data migration system and method for migrating data objects
US9633216B2 (en) 2012-12-27 2017-04-25 Commvault Systems, Inc. Application of information management policies based on operation with a geographic entity
US9459968B2 (en) 2013-03-11 2016-10-04 Commvault Systems, Inc. Single index to query multiple backup formats
US9298752B2 (en) * 2013-08-26 2016-03-29 Dropbox, Inc. Facilitating data migration between database clusters while the database continues operating
US9514164B1 (en) 2013-12-27 2016-12-06 Accenture Global Services Limited Selectively migrating data between databases based on dependencies of database entities
US10169121B2 (en) 2014-02-27 2019-01-01 Commvault Systems, Inc. Work flow management for an information management system
US9648100B2 (en) 2014-03-05 2017-05-09 Commvault Systems, Inc. Cross-system storage management for transferring data across autonomous information management systems
US9823978B2 (en) 2014-04-16 2017-11-21 Commvault Systems, Inc. User-level quota management of data objects stored in information management systems
US9740574B2 (en) 2014-05-09 2017-08-22 Commvault Systems, Inc. Load balancing across multiple data paths
US10860237B2 (en) 2014-06-24 2020-12-08 Oracle International Corporation Storage integrated snapshot cloning for database
US9852026B2 (en) 2014-08-06 2017-12-26 Commvault Systems, Inc. Efficient application recovery in an information management system based on a pseudo-storage-device driver
US11249858B2 (en) 2014-08-06 2022-02-15 Commvault Systems, Inc. Point-in-time backups of a production application made accessible over fibre channel and/or ISCSI as data sources to a remote application by representing the backups as pseudo-disks operating apart from the production application and its host
US10387447B2 (en) * 2014-09-25 2019-08-20 Oracle International Corporation Database snapshots
US10346362B2 (en) 2014-09-26 2019-07-09 Oracle International Corporation Sparse file access
US9444811B2 (en) 2014-10-21 2016-09-13 Commvault Systems, Inc. Using an enhanced data agent to restore backed up data across autonomous storage management systems
US9443550B2 (en) * 2015-01-30 2016-09-13 Oracle International Corporation Data storage system providing efficient and secure data migration with tape drive technology
US9766825B2 (en) 2015-07-22 2017-09-19 Commvault Systems, Inc. Browse and restore for block-level backups
US11068437B2 (en) 2015-10-23 2021-07-20 Oracle Interntional Corporation Periodic snapshots of a pluggable database in a container database
US10296368B2 (en) 2016-03-09 2019-05-21 Commvault Systems, Inc. Hypervisor-independent block-level live browse for access to backed up virtual machine (VM) data and hypervisor-free file-level recovery (block-level pseudo-mount)
KR20170133866A (ko) * 2016-05-27 2017-12-06 삼성에스디에스 주식회사 데이터 이관 장치 및 방법
WO2018037464A1 (ja) * 2016-08-22 2018-03-01 株式会社エーピーコミュニケーションズ ストレージシステム、ストレージ通信装置、ダウンロード方法、及びコンピュータプログラム
US10838821B2 (en) 2017-02-08 2020-11-17 Commvault Systems, Inc. Migrating content and metadata from a backup system
US10740193B2 (en) 2017-02-27 2020-08-11 Commvault Systems, Inc. Hypervisor-independent reference copies of virtual machine payload data based on block-level pseudo-mount
DE102017203239A1 (de) 2017-02-28 2018-08-30 Siemens Aktiengesellschaft Verfahren und Speichersystem zum Speichern von einer Vielzahl von Dateneinheiten
US10891069B2 (en) 2017-03-27 2021-01-12 Commvault Systems, Inc. Creating local copies of data stored in online data repositories
US10776329B2 (en) 2017-03-28 2020-09-15 Commvault Systems, Inc. Migration of a database management system to cloud storage
US11074140B2 (en) 2017-03-29 2021-07-27 Commvault Systems, Inc. Live browsing of granular mailbox data
US10496318B1 (en) * 2017-04-28 2019-12-03 EMC IP Holding Company LLC System and method for capacity management in multi-tiered storage
US10664352B2 (en) 2017-06-14 2020-05-26 Commvault Systems, Inc. Live browsing of backed up data residing on cloned disks
US10817203B1 (en) * 2017-08-29 2020-10-27 Amazon Technologies, Inc. Client-configurable data tiering service
US10795927B2 (en) 2018-02-05 2020-10-06 Commvault Systems, Inc. On-demand metadata extraction of clinical image data
US10761942B2 (en) 2018-03-12 2020-09-01 Commvault Systems, Inc. Recovery point objective (RPO) driven backup scheduling in a data storage management system using an enhanced data agent
US10789387B2 (en) 2018-03-13 2020-09-29 Commvault Systems, Inc. Graphical representation of an information management system
US11068460B2 (en) 2018-08-06 2021-07-20 Oracle International Corporation Automated real-time index management
US10929166B2 (en) 2018-10-19 2021-02-23 Hewlett Packard Enterprise Development Lp Enhanced data storage of virtual nodes in a data processing environment
US10860443B2 (en) 2018-12-10 2020-12-08 Commvault Systems, Inc. Evaluation and reporting of recovery readiness in a data storage management system
US11086549B2 (en) 2019-05-21 2021-08-10 International Business Machines Corporation Just-in-time data migration in a live system
US11429564B2 (en) 2019-06-18 2022-08-30 Bank Of America Corporation File transferring using artificial intelligence
US11308034B2 (en) 2019-06-27 2022-04-19 Commvault Systems, Inc. Continuously run log backup with minimal configuration and resource usage from the source machine

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276867A (en) * 1989-12-19 1994-01-04 Epoch Systems, Inc. Digital data storage system with improved data migration
US5317728A (en) * 1990-09-07 1994-05-31 International Business Machines Corporation Storage management of a first file system using a second file system containing surrogate files and catalog management information
US5333315A (en) * 1991-06-27 1994-07-26 Digital Equipment Corporation System of device independent file directories using a tag between the directories and file descriptors that migrate with the files
US5367698A (en) * 1991-10-31 1994-11-22 Epoch Systems, Inc. Network file migration system
US5479656A (en) * 1992-05-13 1995-12-26 Rawlings, Iii; Joseph H. Method and system for maximizing data files stored in a random access memory of a computer file system and optimization therefor
US5506986A (en) * 1992-07-14 1996-04-09 Electronic Data Systems Corporation Media management system using historical data to access data sets from a plurality of data storage devices
US5495607A (en) * 1993-11-15 1996-02-27 Conner Peripherals, Inc. Network management system having virtual catalog overview of files distributively stored across network domain

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2488876C2 (ru) * 2005-04-20 2013-07-27 Акссана (Израэль) Лтд. Способ и устройство защиты данных
RU2751798C2 (ru) * 2019-12-31 2021-07-19 Банк ВТБ (публичное акционерное общество) Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц
RU2751798C9 (ru) * 2019-12-31 2021-11-16 Банк ВТБ (публичное акционерное общество) Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц

Also Published As

Publication number Publication date
CN1079552C (zh) 2002-02-20
DE69636192T2 (de) 2007-04-05
EP0818006B1 (en) 2006-05-31
JPH11511272A (ja) 1999-09-28
ATE328324T1 (de) 2006-06-15
AU5325296A (en) 1996-10-16
KR100446339B1 (ko) 2004-12-08
AU694022B2 (en) 1998-07-09
KR19980703329A (ko) 1998-10-15
EP0818006A4 (en) 2000-06-21
MX9707374A (es) 1998-03-31
US5564037A (en) 1996-10-08
EP0818006A1 (en) 1998-01-14
CN1184538A (zh) 1998-06-10
DE69636192D1 (de) 2006-07-06
BR9608000A (pt) 1999-08-17
WO1996030839A1 (en) 1996-10-03

Similar Documents

Publication Publication Date Title
RU2190248C2 (ru) Система перемещения данных в реальном времени и способ применения разреженных файлов
CA2308681C (en) Method and apparatus for storage of data
US5287459A (en) Method and apparatus for reducing response time in automated library data retrieval systems
US5491807A (en) System and method for worm volume management of new and updated data files using variable threshold block addresses
US6269382B1 (en) Systems and methods for migration and recall of data from local and remote storage
US6925525B2 (en) Data storage management system and method
US7353242B2 (en) File server for long term data archive
JP2005501317A (ja) 外部データ記憶装置管理システムおよび方法
US6449607B1 (en) Disk storage with modifiable data management function
US20050216532A1 (en) System and method for file migration
US8001327B2 (en) Method and apparatus for managing placement of data in a tiered storage system
US20090070444A1 (en) System and method for managing supply of digital content
US20020069280A1 (en) Method and system for scalable, high performance hierarchical storage management
JP2007073039A (ja) 内容ベースの予見的ストレージ管理を提供するシステム、プログラム製品、方法、およびコンピュータ・ソフトウェア
US20070220205A1 (en) Nas with worm function
JPH07281940A (ja) データ記憶システム・スペース割振り自動化方法及びシステム
US20030037019A1 (en) Data storage and retrieval apparatus and method of the same
EP1215590B1 (en) Method and system for scalable, high performance hierarchical storage management
JP2774691B2 (ja) ファイルシステム
CA2216723C (en) Real time data migration system and method employing sparse files
MXPA97007374A (en) Real-time data migration system ymetodo that uses esca files
JP3313207B2 (ja) 情報記憶装置及び情報管理方法
JPH0628234A (ja) ファイル管理方式
JPH06175895A (ja) 文書作成・電子ファイリング装置
JP2000155707A (ja) ファイルシステム

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20060330