RU2190248C2 - Система перемещения данных в реальном времени и способ применения разреженных файлов - Google Patents
Система перемещения данных в реальном времени и способ применения разреженных файлов Download PDFInfo
- Publication number
- RU2190248C2 RU2190248C2 RU97117860/09A RU97117860A RU2190248C2 RU 2190248 C2 RU2190248 C2 RU 2190248C2 RU 97117860/09 A RU97117860/09 A RU 97117860/09A RU 97117860 A RU97117860 A RU 97117860A RU 2190248 C2 RU2190248 C2 RU 2190248C2
- Authority
- RU
- Russia
- Prior art keywords
- file
- data file
- data
- service
- storage device
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/185—Hierarchical storage management [HSM] systems, e.g. file migration or policies thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0608—Saving storage space on storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99951—File or database maintenance
- Y10S707/99952—Coherency, e.g. same view to multiple users
- Y10S707/99953—Recoverability
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99951—File or database maintenance
- Y10S707/99952—Coherency, e.g. same view to multiple users
- Y10S707/99955—Archiving or backup
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Traffic Control Systems (AREA)
- Detection And Prevention Of Errors In Transmission (AREA)
- Storage Device Security (AREA)
- Communication Control (AREA)
Abstract
Изобретение относится к способу управления иерархической памятью в компьютерной сети. Техническим результатом является обеспечение перемещения файла данных и его обратного перемещения в памяти компьютерной сети без использования фиктивного файла. Способ для перемещения данных в реальном времени в сетевой компьютерной системе использует признак операционной системы - разреженный файл - для представления перемещенного файла. Расширенный файл занимает минимальную величину физического пространства в служебном файловом процессоре, но определяется как имеющий те же размер и атрибуты, что и исходный файл. Когда пользователь обращается к перемещенному файлу, этот файл кажется постоянно присутствующим в служебном файловом процессоре и прозрачно возвращается в служебный файловый процессор из оптимизированного положения хранения в системе управления иерархической памятью. 7 з.п. ф-лы, 6 ил., 3 табл.
Description
Область изобретения
Настоящее изобретение относится к системе и способу управления иерархической памятью во включенной в сеть компьютерной системе. Конкретнее, настоящее изобретение относится к способу автоматического и прозрачного перемещения данных из служебного файлового процессора во вспомогательное запоминающее устройство.
Настоящее изобретение относится к системе и способу управления иерархической памятью во включенной в сеть компьютерной системе. Конкретнее, настоящее изобретение относится к способу автоматического и прозрачного перемещения данных из служебного файлового процессора во вспомогательное запоминающее устройство.
Существующий уровень техники
Системы управления данными на основе сервера становятся стандартным учрежденческим оборудованием, и быстро возрастает потребность в управлении данными. Сегодня многие служащие в больших корпорациях имеют персональный компьютер (ПК) или рабочую станцию, которая соединена с другими компьютерами по локальной вычислительной сети (ЛВС).
Системы управления данными на основе сервера становятся стандартным учрежденческим оборудованием, и быстро возрастает потребность в управлении данными. Сегодня многие служащие в больших корпорациях имеют персональный компьютер (ПК) или рабочую станцию, которая соединена с другими компьютерами по локальной вычислительной сети (ЛВС).
ЛВС в общем случае включает в себя множество компьютерных систем, таких как компьютерные рабочие станции, которые соединены вместе для совместного использования данных и ресурсов, таких как общая память и/или принтер. ЛВС часто включает в себя служебные файловые процессоры, обеспечивающие сетевое обслуживание. Служебный файловый процессор представляет собой в общем случае узел, например компьютер, в компьютерной сети, который обеспечивает компьютерным терминалам в сети обслуживание с помощью управления совместно используемым ресурсом. К примеру, служебный файловый процессор может управлять набором запоминающих дисков и обеспечивать обслуживание по хранению и архивированию компьютерным терминалам в сети, не имеющим собственных дисков, или имеющим данные, которые требуется хранить во внешней памяти.
Потребности ЛВС в памяти растут с ошеломляющей скоростью. Многие сегодняшние серверы оперируют с гигабайтами данных. Кроме того, способность хранить и защищать данные стала критическим вопросом для многих сетевых пользователей. Наиболее общий путь защиты данных состоит в том, чтобы держать их более чем в одном месте. Системы управления данными на основе сервера, такие как система ARCserve® управления данными, обеспечивает резервирование и защиту данных в служебном файловом процессоре ЛВС и/или компьютерных системах, подключенных к ЛВС.
Однако просто обеспечить резервирование и хранение данных из компьютерной сети недостаточно. В частности, внешнему хранению данных надлежит быть автоматическим, оптимальным и прозрачным для сетевого пользователя. Одним методом для обеспечения эффективного внешнего запоминания данных из компьютерной сети является управление иерархической памятью (УИП).
УИП включает в себя запоминание данных компьютерной сети, внешних для служебного файлового процессора в иерархии вторичных и, возможно, третичных запоминающих устройств. Внешние запоминающие устройства являются в общем случае запоминающими устройствами большой емкости, такими как оптическое с однократной записью, перезаписываемое оптическое и магнитная лента. К примеру, оптическое запоминающее устройство и привод магнитной ленты могут быть соединены со служебным файловым процессором как вторичное и третичное запоминающие устройства соответственно. На основе установленного приложением УИП критерия данные, запомненные в служебном файловом процессоре, могут перемещаться в оптическое запоминающее устройство и - на основе выбираемого критерия - перемещаться далее на привод ленты.
К примеру, в качестве критерия для перемещения данных из служебного файлового процессора во вторичное и третичное запоминающие устройства может применяться частота использования данных. За счет перемещения данных, которые используются или выбираются нечасто, можно освободить пространство в служебном файловом процессоре, хотя пользователи продолжают поиск файлов, как если бы они все еще оставались в служебном файловом процессоре. Перемещение относится к передвижению данных из служебного файлового процессора в иерархию памяти (например, внешние запоминающие устройства). Обратное перемещение относится к извлечению данных из иерархии памяти в служебный файловый процессор.
Для получения оптимальной выгоды от приложения УИП вторичное или третичное запоминающие устройства упорядочены в иерархической компоновке для хранения данных. Таким образом, файл данных, который остается в сетевом служебном файловом процессоре в течение заранее заданного периода времени, может переместиться сначала во вторичное запоминающее устройство, которое предназначено для времени относительно частых откликов, когда к файлу обращается сетевой служебный файловый процессор. Если файл данных остается в оптическом запоминающем устройстве в течение заранее заданного периода времени без обращения к нему служебного файлового процессора, то этот файл данных может переместиться далее, в соответствии с иерархией памяти, в запоминающее устройство на магнитной ленте, которое имеет относительно медленное время отклика по сравнению с оптическим запоминающим устройством. Таким образом, система управления иерархической памятью предназначена для более эффективного способа хранения файлов данных сетевой компьютерной системы на основе стоимости, скорости и емкости иерархии запоминающих устройств.
Когда файл перемещается из служебного файлового процессора, исходный файл представляется в служебном файловом процессоре как фиктивный файл, называемый также фантомным файлом или надгробием. Фиктивный файл представляет исходный файл, используя минимальное физическое пространственное размещение, тем самым освобождая как можно больше места в файловом средстве. Фиктивный файл, однако, должен также как можно точнее представлять свойства исходного файла, например размер файла, дату создания, дату последнего обращения, или некоторые признаки, такие как защищенный от записи файл. Но в зависимости от конкретного выполнения УИП, которое осуществляет перемещение, размер файла не представляется точно. Наоборот, фиктивный файл, остающийся в служебном файловом процессоре, имеет размер 0,422 или 1000 байтов независимо от действительной длины исходного файла. К примеру, 100-мегабайтовый файл может быть перемещен из сетевого служебного файлового процессора во внешнее запоминающее устройство, а оставленный в служебном файловом процессоре фиктивный файл в общем случае будет иметь размер 0,422 или 1000 байтов.
Таким образом, известные выполнения перемещений могут снизить физическое пространственное размещение служебного файлового процессора путем использования фиктивных файлов для представления перемещенного файла, но известные способы перемещения неточно представляют действительные свойства исходного файла. Точность представления, особенно размер исходного файла представляет собой важную информацию для любого приложения, где используется размер файла. К примеру, некоторые программные приложения ЛВС пытаются обеспечить статистический анализ количества данных, которыми обладает служебный файловый процессор, либо выполнить некоторые заказные функции на основании размеров конкретных файлов, достигающих заранее заданной величины. Если перемещенные файлы имеют неточное представление, этот анализ или заказные функции не могут быть выполнены должным образом. Кроме того, команда DIR операционной системы например, выдаст пользователю неверный размер файла и приведет пользователя к путанице относительно действительного размера файла. Аналогично, команда COPY операционной системы может показать 1000-байтовый размер для перемещенного файла, который в действительности составляет 2 мегабайта, тем самым заставляя пользователя пытаться скопировать этот файл на дискету, которая слишком мала для этого.
Выполнение УИП в общем случае специализировано для конкретных операционных систем ЛВС. К примеру, операционная система NetWare® компании NOVELL® используется во многих системах ЛВС. Существует несколько версий операционной системы NetWare®, включая версии 3.х и 4.х.
К примеру, в версии 4.х операционной системы NetWare® включено средство Перемещение Данных в Реальном Времени (ПДРВ). При использовании этого средства содержимое файла в служебном файловом процессоре NetWare® (например, в служебном файловом процессоре, работающем в операционной системе NetWare®) может быть перемещено во вторичное запоминающее устройство с компонентом файлового каталога, представляющим перемещенный файл оставленным в служебном файловом процессоре. Этот компонент файлового каталога пуст и, таким образом, не занимает физического пространства в служебном файловом процессоре NetWare®. Кроме того, этот компонент файлового каталога будет указывать правильные свойства перемещенного файла, включая действительный размер этого перемещенного файла. Когда перемещенный файл запрашивается служебным файловым процессором, файл будет автоматически извлекаться в служебный файловый процессор.
Таким образом, ПДРВ версии 4.х операционной системы NetWare® обеспечивает инструмент для автоматического и прозрачного перемещения файлов из объема NetWare® во вторичное хранилище, сохраняя при этом точные компоненты каталога в исходном объеме NetWare® для перемещенных файлов. С другой стороны, версии 3. х операционной системы NetWare®, к примеру, не обеспечивают функциональных возможностей перемещения. Соответственно, продавцы программного обеспечения должны создавать функцию перемещения данных для служебных файловых процессоров версий 3.х операционной системы NetWare®. Однако известные приложения перемещения не обеспечивают компоненты каталога в служебном файловом процессоре, которая является точным представлением перемещенного файла; в зависимости от приложения остающаяся компонента каталога будет фиктивным файлом, имеющим размер 0,422 или 1000 байтов, вместо действительного размера перемещенного файла.
Цель настоящего изобретения состоит в том, чтобы обеспечить перемещение данных из, к примеру, служебного файлового процессора версий 3.х операционной системы NetWare®, которое исключает использование фиктивного файла, не дающего точного представления размера перемещенного файла. Другая цель настоящего изобретения состоит в обеспечении перемещения и обратного перемещения файла, которые абсолютно прозрачны для пользователя.
Раскрытие изобретения
Система и способ согласно настоящему изобретению используют известное средство операционных систем - разреженный файл - для представления перемещенного файла. Разреженный файл представляет собой файл, который имеет физический размер (например, физическое размещение) меньше, чем его логический, или кажущийся, размер. Разреженный файл, таким образом, минимизирует физическое пространство, занимаемое файлом, сохраняя при этом действительные свойства файла, такие как размер и дата создания. Разреженный файл может также удалить все блоки данных исходного файла и определяться как имеющий файловый размер, равный исходному файлу, точно представляя, таким образом, исходный файл и не занимая при этом практически никакого пространства.
Система и способ согласно настоящему изобретению используют известное средство операционных систем - разреженный файл - для представления перемещенного файла. Разреженный файл представляет собой файл, который имеет физический размер (например, физическое размещение) меньше, чем его логический, или кажущийся, размер. Разреженный файл, таким образом, минимизирует физическое пространство, занимаемое файлом, сохраняя при этом действительные свойства файла, такие как размер и дата создания. Разреженный файл может также удалить все блоки данных исходного файла и определяться как имеющий файловый размер, равный исходному файлу, точно представляя, таким образом, исходный файл и не занимая при этом практически никакого пространства.
В соответствии с системой и способом настоящего изобретения, когда файл перемещается из служебного файлового процессора в запоминающую среду, этот подлежащий перемещению файл заменяется в служебном файловом процессоре разреженным файлом, определенным как имеющий те же самые логический размер и признаки, что и исходный файл. Разреженный файл, однако, занимает лишь минимальное пространство, требуемое для хранения файла, например один блок данных. Ключевая информация перемещения запоминается в разреженном файле так, чтобы служебный файловый процессор мог извлечь перемещенный файл, когда он запрашивается пользователем. Когда пользователь запрашивает перемещенный файл, этот файл представляется остающимся в служебном файловом процессоре с действительными свойствами файла и автоматически и прозрачно переносится обратно в служебный файловый процессор из вторичной или третичной запоминающей среды. Таким образом, настоящее изобретение исключает использование фиктивного файла, имеющего заранее заданный и неточный размер для представления перемещенного файла.
Краткое описание чертежей
Фиг.1 показывает систему локальной вычислительной сети, использующую систему управления иерархической памятью согласно настоящему изобретению.
Фиг.1 показывает систему локальной вычислительной сети, использующую систему управления иерархической памятью согласно настоящему изобретению.
Фиг.2 представляет собой иллюстративную блок-схему алгоритма способа перемещения данных в реальном времени, использующего разреженные файлы согласно настоящему изобретению.
Фиг. 3 представляет собой иллюстративную блок-схему алгоритма способа согласно настоящему изобретению для перемещения данных в реальном времени с использованием разреженных файлов согласно настоящему изобретению.
Фиг.4А показывает файл данных, имеющий логический размер.
Фиг. 4В показывает обычное представление разреженного файла для файла, показанного на фиг.4А.
Фиг. 4С показывает представление разреженного файла для файла, показанного на фиг.4А, согласно настоящему изобретению.
Подробное описание изобретения
Фиг.1 представляет систему 1 ЛВС, включающую в себя систему 2 УИП согласно настоящему изобретению. Система 2 УИП обеспечивает возможности УИП, например, для среды версий 3.х операционной системы NetWare® и включает в себя служебный файловый процессор 10, именуемый также первичным запоминающим устройством, связанный со вторичным запоминающим устройством 20. Вторичное запоминающее устройство 20 связано далее с третичным запоминающим устройством 30. За счет оптимального использования служебного файлoвого процессора 10, вторичного запоминающего устройства 20 и третичного запоминающего устройства 30 система 2 УИП может автоматически и прозрачно запоминать иерархически, например, гигабайты данных.
Фиг.1 представляет систему 1 ЛВС, включающую в себя систему 2 УИП согласно настоящему изобретению. Система 2 УИП обеспечивает возможности УИП, например, для среды версий 3.х операционной системы NetWare® и включает в себя служебный файловый процессор 10, именуемый также первичным запоминающим устройством, связанный со вторичным запоминающим устройством 20. Вторичное запоминающее устройство 20 связано далее с третичным запоминающим устройством 30. За счет оптимального использования служебного файлoвого процессора 10, вторичного запоминающего устройства 20 и третичного запоминающего устройства 30 система 2 УИП может автоматически и прозрачно запоминать иерархически, например, гигабайты данных.
Система 1 ЛВС имеет, к примеру, архитектуру клиент - сервер. Клиент представляет собой, например, множество рабочих станций 40, связанных со служебным файловым процессором 10. Рабочая станция 40 включает в себя, к примеру, основанную на микропроцессоре компьютерную систему. По меньшей мере одна из рабочих станций 40 обеспечивает интерфейс для пользователя, чтобы устанавливать критерии перемещения для перемещения данных из служебного файлового процессора 10. Серверная сторона включает в себя служебный файловый процессор 10, имеющий машину 11 перемещения, которая обеспечивает услугу прозрачного перемещения данных из служебного файлового процессора 10 и услугу обратного перемещения в служебный файловый процессор 10.
Машина 11 перемещения, к примеру, периодически просматривает и опознает неактивные файлы согласно заранее заданным критериям. Если файлы опознаны для перемещения, эти файлы перемещаются во вторичную иерархию системы 2 УИП, что дает в результате дополнительное запоминающее пространство для активных файлов в служебном файловом процессоре 10. Система 2 УИП затем управляет перемещенными файлами в иерархии памяти до тех пор, пока не достигается наинизший уровень иерархии памяти.
Согласно фиг. 1 серверная сторона включает в себя, к примеру, три различных модуля. Первый модуль представляет собой служебный файловый процессор 10, из которого желательно передвинуть заранее выбранные файлы, такие как нечасто запрашиваемые файлы, в менее дорогие запоминающие устройства. Второй модуль представляет собой вторичное запоминающее устройство 20, такое как Оптическая Ступень, которое поддерживает оптическое запоминающее устройство. Оптическая Ступень может быть в том же самом или отличающемся сервере операционной системы NetWare®, что и служебный файловый процессор 10. Третий модуль представляет собой третичное запоминающее устройство 30, такое как Ступень Магнитной Ленты, которая поддерживает блок обмена на магнитной ленте. Ступень Магнитной Ленты может быть в том же самом или отличающемся сервере операционной системы NetWare®, что и служебный файловый процессор 10 или Оптическая Ступень 20. Второй и третий модули вместе образуют иерархию памяти. В общем случае каждая ступень в иерархии памяти является однородным собранием запоминающих сред, например все среды в ступени имеют одинаковые физические свойства. Связь между ступенями осуществляется через собственный протокол связи операционной системы NetWare®, такой как IPX, SPX, TLI или TCP/IP. Кроме того, по желанию ко вторичному запоминающему устройству 20 и третичному запоминающему устройству 30, показанным на фиг.1, могут быть добавлены дополнительные ступени запоминания в систему УИП.
Оптическое запоминающее устройство 20, такое как Перезаписываемое Оптическое устройство, в общем случае имеет время обращения в диапазоне 5-10 секунд, поскольку запоминающая среда является удаляемой и обычно требует установки в дисковод и раскрутки перед тем, как к ней можно обратиться. Для автоматической работы оптической памяти может использоваться оптический автомат; в противном случае оператор должен вручную обслуживать запросы на загрузку сред. Запоминающее устройство 30 на магнитной ленте, такое как Привод 8-миллиметровой Ленты компании Hewlett-Packard, может иметь время обращения в несколько минут, поскольку запоминающая среда является удаляемой и обычно требует установки в привод перед тем, как к ней можно обратиться. Для автоматической работы может использоваться автоматическое устройство смены лент; в противном случае оператор должен вручную обслуживать запросы на загрузку сред.
Каждая ступень в примерной иерархии памяти, показанной на фиг.1, управляется средствами 21, 31 перемещения ступени соответственно. Средства 21, 31 перемещения ступени включают в себя, к примеру, вспомогательную программу, постоянно находящуюся в служебном файловом процессоре 10 или в отдельном служебном файловом процессоре. Средства 21, 31 перемещения ступени размещены в служебном файловом процессоре, который связан с их соответствующими вторичным запоминающим устройством 20 и третичным запоминающим устройством 30. Как показано на фиг.1, средство 21 перемещения ступени размещено в служебном файловом процессоре 15, а средство 31 перемещения ступени размещено в служебном файловом процессоре 16. Каждое средство 21, 31 перемещения ступени, к примеру, управляет перемещением файлов, извлекает файлы по запросу и перемещает файлы в следующую ступень в иерархии памяти в соответствии с правилами иерархии памяти. Т. к. каждая ступень иерархии памяти имеет средство перемещения ступени, эта иерархия памяти может быть распределена, благодаря чему снижается рабочая нагрузка на служебный файловый процессор 10 через, например, служебные файловые процессоры 15 и 16.
Пользователь системы 1 ЛВС может установить, к примеру, системное задание перемещения для всего служебного файлового процессора 10, который будет периодически осуществлять просмотр для поддержания дисковой памяти в служебном файловом процессоре 10 в приемлемых пределах. Пользователь имеет также возможность осуществлять задания на перемещение по требованию и для конкретного случая или задания обратного перемещения. Все файлы из любого служебного файлового процессора 10 должны, однако, перемещаться в ту же самую иерархию памяти.
Для системного задания перемещения, т.е. перемещения данных из служебного файлового процессора 10, пользователю необходимо указать файлы/каталоги, которые являются кандидатами для перемещения. Способ выбора может быть указан пользователем согласно различным критериям. Например, параметрические переменные для перемещения данных могут включать в себя переменные данных, заранее заданные фильтры или отметки уровня, которые основаны на доступности запоминания в конкретном устройстве.
Параметрические переменные данных задаются для перемещения файлов из служебного файлового процессора 10 на основании, к примеру, данных о том, когда было последнее обращение к файлу, данных о том, когда было последнее обновление файла, или даты создания этого файла. Заранее заданные фильтровые параметрические переменные задаются для перемещения файлов из служебного файлового процессора 10 на основании, к примеру, сопоставления с образцом для имени файла, признака файла (например, системный файл, доступный лишь для чтения файл) или заранее заданного размера файла. Параметрические переменные отметок уровня задаются для перемещения файлов из служебного файлового процессора 10 на основании величины пространства памяти, доступного на конкретном запоминающем устройстве.
При использовании параметров отметок уровня, к примеру, система 2 УИП может перемещать файлы из служебного файлового процессора 10 во вторичное запоминающее устройство 20, когда пространство памяти, доступное в служебном файловом процессоре 10, достигает отметки критического уровня, на которой немедленно осуществляется аварийное перемещение в соответствии с заранее заданными критериями перемещения, чтобы избежать ситуации "заполнения объема". Файлы будут затем перемещаться до тех пор, пока доступное пространство памяти не достигнет отметки высокого уровня (например, безопасного уровня). Отметка высокого уровня определяется, к примеру, как проценты от используемого пространства в служебном файловом процессоре 10. Когда используемое пространство ниже отметки критического уровня и выше отметки высокого уровня, файлы будут перемещаться на заранее заданное время, к примеру, на основании наименьшего числа обращений в последнее время до тех пор, пока не достигается отметка низкого уровня. Отметка низкого уровня также определяется, к примеру, как проценты от используемого пространства в служебном файловом процессоре 10. Когда используемое пространство ниже отметки низкого уровня, никакого перемещения из служебного файлового процессора 10 не происходит.
Параметры для опознавания файлов, подлежащих перемещению из служебного файлового процессора 10, могут по желанию объединяться пользователем. Когда пользователь устанавливает системное задание перемещения, он также может определить, должно ли выполняться дальнейшее перемещение, например, из вторичного запоминающего устройства 20 в третичное запоминающее устройство 30. Кроме того, пользователь может определить период времени, в течение которого перемещенный файл должен оставаться в запоминающем устройстве перед тем, как осуществить дальнейшее перемещение.
Когда файл, постоянно находящийся в служебном файловом процессоре 10, опознается для перемещения в иерархию памяти системы 2 УИП, выполняется способ согласно настоящему изобретению, представленный блок-схемой алгоритма на фиг.2. Как показано на фиг.2, процесс начинается на шаге S0, когда машина 11 перемещения генерирует команду переместить файл из служебного файлового процессора 10. На шаге S1 подлежащий перемещению файл открывается, а на шаге S2 этот файл считывается. На шаге S3 копия блоков данных подлежащего перемещению файла передается во вторичное запоминающее устройство 20. Средство 21 перемещения ступени возвращает ключ перемещения машине 11 перемещения, указывая местоположение перемещенного файла.
После того как файл передан во вторичное запоминающее устройство 20, исходный файл, который все еще остается в служебном файловом процессоре 10, отбрасывается на шаге S4. Отбрасывание исходного файла на шаге S4 освобождает блоки данных исходного файла, так что эти блоки данных становятся доступны для перераспределения служебным файловым процессором 10. В этой точке исходный файл имеет физическое размещение, к примеру, равное нулю блоков данных из-за перераспределения на шаге S4. Кроме того, действительные свойства исходного файла запоминаются машиной 11 перемещения. На шаге S5 ключ перемещения записывается в исходный файл, который теперь является разреженным файлом, имеющим физическое размещение размером, например, в один блок данных, содержащий ключ перемещения. Таким образом, физическое размещение разреженного файла меньше, чем логический размер исходного файла. На шаге S6 машина 11 перемещения определяет исходный файл как имеющий логический размер, равный действительному файловому размеру исходного файла, тем самым создавая разреженный файл с физическим размещением размером в один блок, но с логическим размером, равным местоположению исходного файла. Процесс перемещения завершается на шаге S7, когда машина 11 перемещения выходит из процесса перемещения.
Обычная работа разреженного файла иллюстрируется на фиг.4А и 4В. Файл, имеющий размер в n блоков данных (блоки 0-n), только некоторые из которых содержат данные, показан на фиг.4А. Например, блоки 0, 4, 7, 10 и n данных показаны на фиг.4А содержащими данные. Файл, показанный на фиг.4В, является разреженным файлом, который представляет файл на фиг.4А. Файл на фиг.4В имеет физический размер, к примеру, в пять блоков данных, представляющих только занятые данными блоки фиг.4А. Таким образом, разреженный файл обеспечивает способ создания файла с физическим размером, который намного меньше, чем его логический размер, тем самым предотвращая избыток пространства памяти в служебном файловом процессоре 10.
Для создания разреженного файла, показанного на фиг.4В, компьютерный программист задает специальные команды, когда создает файл, которые распознаются операционной системой системы 1 ЛВС. Например, версия 3.х операционной системы NetWare® компании Novell® интерпретирует команду SEEK так, чтобы не размещать блоки данных между адресами SEEK. В противоположность этому, другие операционные системы обращаются с командой SEEK так, чтобы размещать блоки данных между адресами SEEK. Шаги, показанные ниже в таблице 1, представляют собой примерные шаги, которые могут выполняться для создания разреженного файла, представленного на фиг.4В:
Таблица 1
а) Открыть файл
б) Искать блок 0 данных
в) Записать данные блока 0 данных
г) Искать блок 4 данных
д) Записать данные блока 4 данных
е) Искать блок 7 данных
ж) Записать данные блока 7 данных
з) Искать блок 10 данных
и) Записать данные блока 10 данных
к) Искать блок n данных
л) Записать данные блока n данных
м) Закрыть файл
Соответственно, шаги, показанные в таблице 1, интерпретируются версией 3. х операционной системы NetWare® компании Novell®, чтобы размещать только блоки данных, в которых имеется запись, - таким образом создается разреженный файл, имеющий лишь пять блоков данных, представляющих занятые блоки 0, 4, 7, 10 и n данных. Разреженный файл указывает свой действительный размер, но, будучи запрошен пользователем, этот файл выдается пользователю в виде, показанном на фиг.4А, т.е. имеющим физическое размещение с размером, равным его логическому размеру.
Таблица 1
а) Открыть файл
б) Искать блок 0 данных
в) Записать данные блока 0 данных
г) Искать блок 4 данных
д) Записать данные блока 4 данных
е) Искать блок 7 данных
ж) Записать данные блока 7 данных
з) Искать блок 10 данных
и) Записать данные блока 10 данных
к) Искать блок n данных
л) Записать данные блока n данных
м) Закрыть файл
Соответственно, шаги, показанные в таблице 1, интерпретируются версией 3. х операционной системы NetWare® компании Novell®, чтобы размещать только блоки данных, в которых имеется запись, - таким образом создается разреженный файл, имеющий лишь пять блоков данных, представляющих занятые блоки 0, 4, 7, 10 и n данных. Разреженный файл указывает свой действительный размер, но, будучи запрошен пользователем, этот файл выдается пользователю в виде, показанном на фиг.4А, т.е. имеющим физическое размещение с размером, равным его логическому размеру.
В соответствии с настоящим изобретением признак разреженного файла, к примеру признак разреженного файла в версии 3. х операционной системы NetWare® компании Novell®, используется для представления файла, который перемещен из служебного файлового процессора 10 без включения какого-либо из занятых блоков данных исходного файла. Таким образом, как показано на фиг. 4С, разреженный файл, имеющий только один блок данных, но определенный как имеющий логический размер, равный действительному размеру файла, показанного на фиг.4А, генерируется посредством способа согласно настоящему изобретению. Пунктирные линии, показанные на фиг.4С, указывают логический размер этого файла, для которого, однако, никакие блоки данных не размещены. Таблица 2 показывает примерные шаги для создания разреженного файла по фиг.4С:
Таблица 2
а) Открыть файл
б) Записать ключ перемещения
в) Искать действительный размер исходного файла
г) Записать "0"
д) Закрыть файл
В соответствии с настоящим изобретением признак разреженного файла операционной системы NetWare® компании Novell® используется для минимизации физического размещения, необходимого для представления перемещенного файла в служебном файловом процессоре 10, сохраняя при этом действительные свойства исходного файла. Соответственно, после того как исходный файл скопирован и послан во вторичное запоминающее устройство 20, а затем отброшен, остающийся в служебном файловом процессоре 10 файл может обрабатываться посредством примерных шагов, описанных в таблице 2. Шаг б), который реализует операцию "Искать действительный размер исходного файла", определяет разреженный файл как имеющий логический размер, равный физическому размеру исходного файла. Отбрасывание исходного файла, однако, снижает физический размер, занимаемый разреженным файлом в служебном файловом процессоре 10.
Таблица 2
а) Открыть файл
б) Записать ключ перемещения
в) Искать действительный размер исходного файла
г) Записать "0"
д) Закрыть файл
В соответствии с настоящим изобретением признак разреженного файла операционной системы NetWare® компании Novell® используется для минимизации физического размещения, необходимого для представления перемещенного файла в служебном файловом процессоре 10, сохраняя при этом действительные свойства исходного файла. Соответственно, после того как исходный файл скопирован и послан во вторичное запоминающее устройство 20, а затем отброшен, остающийся в служебном файловом процессоре 10 файл может обрабатываться посредством примерных шагов, описанных в таблице 2. Шаг б), который реализует операцию "Искать действительный размер исходного файла", определяет разреженный файл как имеющий логический размер, равный физическому размеру исходного файла. Отбрасывание исходного файла, однако, снижает физический размер, занимаемый разреженным файлом в служебном файловом процессоре 10.
В дополнение к шагам, показанным в таблице 2, другой набор примерных шагов для создания разреженного файла согласно настоящему изобретению показан в таблице 3:
Таблица 3
а) Открыть файл
б) Записать ключ перемещения
в) Изменить размер на действительный размер файла
г) Закрыть файл
Операция "Изменить размер" может выполняться для определения логического размера разреженного файла, потому что после отбрасывания исходного файла в служебном файловом процессоре 10 отсутствуют блоки данных, на которые могла бы воздействовать операция "Изменить размер". Поэтому способ согласно настоящему изобретению использует известный признак операционной системы - разреженный файл - для представления перемещенного файла в служебном файловом процессоре 10, причем разреженный файл имеет минимальный физический размер, в то время как он определен как имеющий действительные свойства перемещенного файла.
Таблица 3
а) Открыть файл
б) Записать ключ перемещения
в) Изменить размер на действительный размер файла
г) Закрыть файл
Операция "Изменить размер" может выполняться для определения логического размера разреженного файла, потому что после отбрасывания исходного файла в служебном файловом процессоре 10 отсутствуют блоки данных, на которые могла бы воздействовать операция "Изменить размер". Поэтому способ согласно настоящему изобретению использует известный признак операционной системы - разреженный файл - для представления перемещенного файла в служебном файловом процессоре 10, причем разреженный файл имеет минимальный физический размер, в то время как он определен как имеющий действительные свойства перемещенного файла.
Когда файл перемещен из служебного файлового процессора 10 в систему 2 УИП, файл извлекается при обратном перемещении в служебный файловый процессор 10. Обратное перемещение происходит, к примеру, когда пользователь обращается к перемещенному файлу, и служебный файловый процессор 10 запрашивает файл через машину 11 перемещения. Как показано на фиг.3, процесс обратного перемещения начинается на шаге S10, когда перемещенный файл запрашивается служебным файловым процессором 10.
На шаге S10A машина 11 перемещения считывает информацию ключа перемещения, запомненную в разреженном файле, для определения местоположения перемещенного файла. На шаге S10B машина 11 перемещения посылает ключ перемещения на средство 21 перемещения ступени. Средство 21 перемещения ступени использует ключ перемещения ступени для определения на шаге S10C того, расположен ли запрошенный файл во вторичном запоминающем устройстве 20 или перемещен дальше в третичное запоминающее устройство 30. Когда на шаге S10D файл находится, этот файл посылается служебному файловому процессору 10 через машину 11 перемещения. На шаге S11 машина 11 перемещения считывает данные запрошенного файла.
После того как данные из перемещенного файла считаны, разреженный файл открывается на шаге S12 машиной 11 перемещения. На шаге S13 содержимое исходного файла, извлеченного из системы 2 УИП, загружается в разреженный файл, преобразуя разреженный файл обратно в исходный файл, имеющий исходное физическое размещение. Таким образом, после шага S13 исходный файл снова постоянно находится в служебном файловом процессоре 10 в своем исходном виде (например, перед перемещением). Вдобавок пользователь не был осведомлен, что компонентой каталога служебного файлового процессора 10 был в действительности разреженный файл, не содержащий действительных данных исходного файла, но лишь ограниченную описательную информацию. Кроме того, обратное перемещение перемещенного файла является автоматическим и прозрачным для пользователя.
На шаге S14 информация ключа перемещения, хранившаяся до этого в разреженном файле, который более не существует в служебном файловом процессоре 10, а существует в иерархии памяти, потому что из этой иерархии памяти извлечена только копия исходного файла, запоминается, к примеру, в Расширенном Атрибуте (РА) операционной системы NetWare® компании Novell®. Если извлеченный файл не изменен и ранее опознан для перемещения, прежний ключ перемещения будет использоваться для предотвращения ненужной передачи данных в иерархию памяти, поскольку этот файл уже хранился во внешнем запоминающем устройстве. В этом случае в служебном файловом процессоре 10 будет создаваться только разреженный файл. На шаге S15 машина 11 перемещения выходит из процесса обратного перемещения.
Claims (8)
1. Способ перемещения файла данных в компьютерной сети из первого запоминающего устройства во второе запоминающее устройство, включающий передачу и запись содержимого файла данных, имеющего первый фактический размер из первого запоминающего устройства во второе запоминающее устройство, укорачивание файла данных путем деадресации блоков данных и создание на первом запоминающем устройстве разреженного файла данных, логический размер которого равен первому фактическому размеру, а реальный размер которого меньше первого реального размера, запись в разреженный файл данных первого запоминающего устройства ключа перемещения, определяющего местоположение переданного файла данных.
2. Способ по п. 1, отличающийся тем, что дополнительно осуществляют перемещение данных из второго запоминающего устройства в третье запоминающее устройство как функцию заранее заданной иерархии хранения данных.
3. Способ по п. 1, отличающийся тем, что компьютерная сеть использует версию 3-х операционной системы Novell NetWare.
4. Способ по п. 1, отличающийся тем, что при создании разреженного файла данных дополнительно проводят операцию открытия файла данных, первую операцию записи в файле данных, операцию поиска в файле данных, вторую операцию записи в файле данных и операцию закрытия файла данных.
5. Способ по п. 4, отличающийся тем, что операция поиска включает поиск первого реального размера.
6. Способ по п. 4, отличающийся тем, что при первой операции записи записывают ключ перемещения в файл данных.
7. Способ по п. 1, отличающийся тем, что при создании разреженного файла данных дополнительно проводят операцию открытия файла данных, первую операцию записи в файле данных, операцию изменения размера в файле данных и операцию закрытия файла данных.
8. Способ по п. 7, отличающийся тем, что операция изменения размера осуществляет изменение размера до первого реального размера.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US08/413,056 US5564037A (en) | 1995-03-29 | 1995-03-29 | Real time data migration system and method employing sparse files |
US08/413,056 | 1995-03-29 |
Publications (2)
Publication Number | Publication Date |
---|---|
RU97117860A RU97117860A (ru) | 1999-10-27 |
RU2190248C2 true RU2190248C2 (ru) | 2002-09-27 |
Family
ID=23635640
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU97117860/09A RU2190248C2 (ru) | 1995-03-29 | 1996-03-29 | Система перемещения данных в реальном времени и способ применения разреженных файлов |
Country Status (11)
Country | Link |
---|---|
US (1) | US5564037A (ru) |
EP (1) | EP0818006B1 (ru) |
JP (1) | JPH11511272A (ru) |
KR (1) | KR100446339B1 (ru) |
CN (1) | CN1079552C (ru) |
AT (1) | ATE328324T1 (ru) |
AU (1) | AU694022B2 (ru) |
BR (1) | BR9608000A (ru) |
DE (1) | DE69636192T2 (ru) |
RU (1) | RU2190248C2 (ru) |
WO (1) | WO1996030839A1 (ru) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2488876C2 (ru) * | 2005-04-20 | 2013-07-27 | Акссана (Израэль) Лтд. | Способ и устройство защиты данных |
RU2751798C2 (ru) * | 2019-12-31 | 2021-07-19 | Банк ВТБ (публичное акционерное общество) | Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц |
Families Citing this family (143)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5909700A (en) * | 1996-12-23 | 1999-06-01 | Emc Corporation | Back-up data storage facility incorporating filtering to select data items to be backed up |
US5873103A (en) * | 1994-02-25 | 1999-02-16 | Kodak Limited | Data storage management for network interconnected processors using transferrable placeholders |
US5678044A (en) * | 1995-06-02 | 1997-10-14 | Electronic Data Systems Corporation | System and method for improved rehosting of software systems |
US5680640A (en) * | 1995-09-01 | 1997-10-21 | Emc Corporation | System for migrating data by selecting a first or second transfer means based on the status of a data element map initialized to a predetermined state |
US5799324A (en) * | 1996-05-10 | 1998-08-25 | International Business Machines Corporation | System and method for management of persistent data in a log-structured disk array |
US5933653A (en) * | 1996-05-31 | 1999-08-03 | Emc Corporation | Method and apparatus for mirroring data in a remote data storage system |
US5835954A (en) * | 1996-09-12 | 1998-11-10 | International Business Machines Corporation | Target DASD controlled data migration move |
US5794254A (en) * | 1996-12-03 | 1998-08-11 | Fairbanks Systems Group | Incremental computer file backup using a two-step comparison of first two characters in the block and a signature with pre-stored character and signature sets |
US6038665A (en) * | 1996-12-03 | 2000-03-14 | Fairbanks Systems Group | System and method for backing up computer files over a wide area computer network |
US5822780A (en) * | 1996-12-31 | 1998-10-13 | Emc Corporation | Method and apparatus for hierarchical storage management for data base management systems |
JPH10224665A (ja) * | 1997-02-04 | 1998-08-21 | Sony Corp | 送出システム |
JP3734334B2 (ja) * | 1997-05-07 | 2006-01-11 | 富士通株式会社 | データ移行システム、データ移行用プログラムを格納したコンピュータ読み取り可能な記録媒体、及びデータ移行方法 |
US6366988B1 (en) * | 1997-07-18 | 2002-04-02 | Storactive, Inc. | Systems and methods for electronic data storage management |
US5983368A (en) * | 1997-08-26 | 1999-11-09 | International Business Machines Corporation | Method and system for facilitating hierarchical storage management (HSM) testing |
US6145068A (en) * | 1997-09-16 | 2000-11-07 | Phoenix Technologies Ltd. | Data transfer to a non-volatile storage medium |
US6704553B1 (en) * | 1997-10-08 | 2004-03-09 | Thomas M. Eubanks | System and method for providing automatic tuning of a radio receiver and for providing automatic control of a CD/tape player |
US6145066A (en) * | 1997-11-14 | 2000-11-07 | Amdahl Corporation | Computer system with transparent data migration between storage volumes |
US6105037A (en) | 1997-12-12 | 2000-08-15 | International Business Machines Corporation | Apparatus for performing automated reconcile control in a virtual tape system |
US5953729A (en) | 1997-12-23 | 1999-09-14 | Microsoft Corporation | Using sparse file technology to stage data that will then be stored in remote storage |
US6088805A (en) * | 1998-02-13 | 2000-07-11 | International Business Machines Corporation | Systems, methods and computer program products for authenticating client requests with client certificate information |
WO1999056211A1 (fr) * | 1998-04-27 | 1999-11-04 | Sony Corporation | Dispositif et procede d'enregistrement/lecture de donnees |
US6757705B1 (en) * | 1998-08-14 | 2004-06-29 | Microsoft Corporation | Method and system for client-side caching |
US6199194B1 (en) * | 1998-09-25 | 2001-03-06 | Adaptec, Inc. | Method and system for programming firmware over a computer network |
US6378128B1 (en) * | 1998-10-08 | 2002-04-23 | Microsoft Corporation | System and method for dynamically modifying an install-set |
US6442601B1 (en) * | 1999-03-25 | 2002-08-27 | International Business Machines Corporation | System, method and program for migrating files retrieved from over a network to secondary storage |
US7035880B1 (en) | 1999-07-14 | 2006-04-25 | Commvault Systems, Inc. | Modular backup and retrieval system used in conjunction with a storage area network |
US6938058B2 (en) * | 1999-08-23 | 2005-08-30 | Eisenworld, Inc. | Apparatus and method for transferring information between platforms |
GB0002019D0 (en) * | 2000-01-29 | 2000-03-22 | Ibm | Data migration tool |
US7434219B2 (en) | 2000-01-31 | 2008-10-07 | Commvault Systems, Inc. | Storage of application specific profiles correlating to document versions |
US6658436B2 (en) | 2000-01-31 | 2003-12-02 | Commvault Systems, Inc. | Logical view and access to data managed by a modular data and storage management system |
US7003641B2 (en) | 2000-01-31 | 2006-02-21 | Commvault Systems, Inc. | Logical view with granular access to exchange data managed by a modular data and storage management system |
US6795835B2 (en) * | 2000-05-19 | 2004-09-21 | Centerbeam, Inc. | Migration of computer personalization information |
US6952730B1 (en) * | 2000-06-30 | 2005-10-04 | Hewlett-Packard Development Company, L.P. | System and method for efficient filtering of data set addresses in a web crawler |
US6751635B1 (en) * | 2000-08-18 | 2004-06-15 | Network Appliance, Inc. | File deletion and truncation using a zombie file space |
US6981005B1 (en) * | 2000-08-24 | 2005-12-27 | Microsoft Corporation | Partial migration of an object to another storage location in a computer system |
CA2489324A1 (en) * | 2000-09-11 | 2003-12-24 | Agami Systems, Inc. | Storage system having partitioned migratable metadata |
JP4627110B2 (ja) * | 2000-10-16 | 2011-02-09 | 富士通株式会社 | データ記憶装置 |
US7281010B2 (en) * | 2000-11-15 | 2007-10-09 | Lenovo (Singapore) Pte. Ltd. | Trusted computing platform with dual key trees to support multiple public/private key systems |
US7047420B2 (en) | 2001-01-17 | 2006-05-16 | Microsoft Corporation | Exclusive encryption |
US6990667B2 (en) | 2001-01-29 | 2006-01-24 | Adaptec, Inc. | Server-independent object positioning for load balancing drives and servers |
US7043637B2 (en) * | 2001-03-21 | 2006-05-09 | Microsoft Corporation | On-disk file format for a serverless distributed file system |
US7062490B2 (en) | 2001-03-26 | 2006-06-13 | Microsoft Corporation | Serverless distributed file system |
US6981138B2 (en) | 2001-03-26 | 2005-12-27 | Microsoft Corporation | Encrypted key cache |
US6988124B2 (en) * | 2001-06-06 | 2006-01-17 | Microsoft Corporation | Locating potentially identical objects across multiple computers based on stochastic partitioning of workload |
US7546354B1 (en) * | 2001-07-06 | 2009-06-09 | Emc Corporation | Dynamic network based storage with high availability |
US8640136B2 (en) * | 2001-09-26 | 2014-01-28 | Emc Corporation | Sharing objects between computer systems |
KR20040053142A (ko) * | 2001-09-26 | 2004-06-23 | 이엠씨 코포레이션 | 대형 파일들의 효율적 관리 |
JP2005505039A (ja) * | 2001-09-28 | 2005-02-17 | コムヴォールト・システムズ・インコーポレーテッド | 情報記憶装置にオブジェクトをアーカイブする装置及び方法 |
JP4176341B2 (ja) * | 2001-10-23 | 2008-11-05 | 株式会社日立製作所 | 記憶制御装置 |
DE60112589T2 (de) * | 2001-11-13 | 2006-06-22 | Hitachi, Ltd. | Rechnerdatenmigrationsvorrichtung und Verfahren dafür |
JP4168626B2 (ja) * | 2001-12-06 | 2008-10-22 | 株式会社日立製作所 | 記憶装置間のファイル移行方法 |
JP2003237914A (ja) * | 2002-02-15 | 2003-08-27 | Hitachi Ltd | 記憶メディア保管システム及びその運用方法 |
DE10211606B4 (de) * | 2002-03-12 | 2017-06-08 | Kip Cr P1 Lp | Datenverarbeitungseinrichtung mit einem Metadatensicherungsmanagement |
US6964833B2 (en) * | 2002-05-31 | 2005-11-15 | Samsung Electronics Co., Ltd. | Linked dihydrazone-based charge transport compounds |
EP1514183A2 (en) | 2002-06-20 | 2005-03-16 | BRITISH TELECOMMUNICATIONS public limited company | Distributed computer |
US7937430B1 (en) * | 2002-07-31 | 2011-05-03 | At&T Intellectual Property I, L.P. | System and method for collecting and transmitting data in a computer network |
KR100457046B1 (ko) * | 2002-08-07 | 2004-11-10 | 삼성전자주식회사 | 반도체 장치의 제조에서 콘택 형성 방법 |
ATE400026T1 (de) * | 2002-09-10 | 2008-07-15 | Exagrid Systems Inc | Datenschutzverfahren und vorrichtung |
GB0230331D0 (en) | 2002-12-31 | 2003-02-05 | British Telecomm | Method and apparatus for operating a computer network |
US6981117B2 (en) | 2003-01-29 | 2005-12-27 | International Business Machines Corporation | Method, system, and program for transferring data |
JP4267353B2 (ja) | 2003-03-28 | 2009-05-27 | 株式会社日立製作所 | データ移行支援システム、および、データ移行支援方法 |
JP2004318743A (ja) * | 2003-04-21 | 2004-11-11 | Hitachi Ltd | ファイル移送装置 |
US7454569B2 (en) | 2003-06-25 | 2008-11-18 | Commvault Systems, Inc. | Hierarchical system and method for performing storage operations in a computer network |
US20060294039A1 (en) * | 2003-08-29 | 2006-12-28 | Mekenkamp Gerhardus E | File migration history controls updating or pointers |
US7734690B2 (en) * | 2003-09-05 | 2010-06-08 | Microsoft Corporation | Method and apparatus for providing attributes of a collaboration system in an operating system folder-based file system |
WO2005050381A2 (en) | 2003-11-13 | 2005-06-02 | Commvault Systems, Inc. | Systems and methods for performing storage operations using network attached storage |
JP2005165486A (ja) * | 2003-12-01 | 2005-06-23 | Sony Corp | ファイル管理装置、ストレージ管理システム、ストレージ管理方法、プログラム及び記録媒体 |
US20050216532A1 (en) * | 2004-03-24 | 2005-09-29 | Lallier John C | System and method for file migration |
GB0412655D0 (en) * | 2004-06-07 | 2004-07-07 | British Telecomm | Distributed storage network |
JP2006079273A (ja) * | 2004-09-08 | 2006-03-23 | Sony Corp | ファイル管理装置、ネットワークシステム、ファイル管理方法及びプログラム |
JP4349301B2 (ja) * | 2004-11-12 | 2009-10-21 | 日本電気株式会社 | ストレージ管理システムと方法並びにプログラム |
US20060136525A1 (en) * | 2004-12-21 | 2006-06-22 | Jens-Peter Akelbein | Method, computer program product and mass storage device for dynamically managing a mass storage device |
US7831639B1 (en) * | 2004-12-22 | 2010-11-09 | Symantec Operating Corporation | System and method for providing data protection by using sparse files to represent images of data stored in block devices |
US20060230136A1 (en) * | 2005-04-12 | 2006-10-12 | Kenneth Ma | Intelligent auto-archiving |
US7853667B1 (en) * | 2005-08-05 | 2010-12-14 | Network Appliance, Inc. | Emulation of transparent recall in a hierarchical storage management system |
US7464114B2 (en) * | 2005-09-27 | 2008-12-09 | International Business Machines Corporation | Method and apparatus to capture and transmit dense diagnostic data of a file system |
US20070130232A1 (en) * | 2005-11-22 | 2007-06-07 | Therrien David G | Method and apparatus for efficiently storing and managing historical versions and replicas of computer data files |
JP4563314B2 (ja) * | 2005-12-14 | 2010-10-13 | 富士通株式会社 | ストレージシステム制御装置、ストレージシステム制御プログラム、ストレージシステム制御方法 |
US7552300B2 (en) * | 2006-01-03 | 2009-06-23 | International Business Machines Corporation | Method for migrating objects in content management systems through exploitation of file properties, temporal locality, and spatial locality |
JP4908849B2 (ja) * | 2006-01-11 | 2012-04-04 | 富士通セミコンダクター株式会社 | ファイル削除方法、ファイル・オープン方法、ファイル削除プログラム、および、ファイル・オープン・プログラム |
US7543128B2 (en) * | 2006-07-25 | 2009-06-02 | Hewlett-Packard Development Company, L.P. | Method and apparatus for repurposing compute resources to implement, or not implement, storage access protocols |
US7734669B2 (en) | 2006-12-22 | 2010-06-08 | Commvault Systems, Inc. | Managing copies of data |
US8738588B2 (en) * | 2007-03-26 | 2014-05-27 | International Business Machines Corporation | Sequential media reclamation and replication |
US7720819B2 (en) * | 2007-04-12 | 2010-05-18 | International Business Machines Corporation | Method and apparatus combining revision based and time based file data protection |
JP4375435B2 (ja) * | 2007-05-23 | 2009-12-02 | 株式会社日立製作所 | 予知型データ移行を行う階層ストレージシステム |
US7685186B2 (en) * | 2007-06-25 | 2010-03-23 | Microsoft Corporation | Optimized and robust in-place data transformation |
US8249257B2 (en) * | 2007-09-28 | 2012-08-21 | Intel Corporation | Virtual TPM keys rooted in a hardware TPM |
US8396838B2 (en) | 2007-10-17 | 2013-03-12 | Commvault Systems, Inc. | Legal compliance, electronic discovery and electronic document handling of online and offline copies of data |
US8259948B2 (en) * | 2007-12-29 | 2012-09-04 | Intel Corporation | Virtual TPM key migration using hardware keys |
US8769048B2 (en) | 2008-06-18 | 2014-07-01 | Commvault Systems, Inc. | Data protection scheduling, such as providing a flexible backup window in a data protection system |
US9128883B2 (en) | 2008-06-19 | 2015-09-08 | Commvault Systems, Inc | Data storage resource allocation by performing abbreviated resource checks based on relative chances of failure of the data storage resources to determine whether data storage requests would fail |
US8352954B2 (en) | 2008-06-19 | 2013-01-08 | Commvault Systems, Inc. | Data storage resource allocation by employing dynamic methods and blacklisting resource request pools |
US8725688B2 (en) | 2008-09-05 | 2014-05-13 | Commvault Systems, Inc. | Image level copy or restore, such as image level restore without knowledge of data object metadata |
US20100070474A1 (en) | 2008-09-12 | 2010-03-18 | Lad Kamleshkumar K | Transferring or migrating portions of data objects, such as block-level data migration or chunk-based data migration |
US8359192B2 (en) * | 2008-11-19 | 2013-01-22 | Lemi Technology, Llc | System and method for internet radio station program discovery |
US20100257218A1 (en) * | 2009-04-03 | 2010-10-07 | Konstantin Iliev Vassilev | Merging multiple heterogeneous file systems into a single virtual unified file system |
US8874628B1 (en) * | 2009-10-15 | 2014-10-28 | Symantec Corporation | Systems and methods for projecting hierarchical storage management functions |
US9128942B1 (en) * | 2010-12-24 | 2015-09-08 | Netapp, Inc. | On-demand operations |
US9021198B1 (en) | 2011-01-20 | 2015-04-28 | Commvault Systems, Inc. | System and method for sharing SAN storage |
US8849762B2 (en) | 2011-03-31 | 2014-09-30 | Commvault Systems, Inc. | Restoring computing environments, such as autorecovery of file systems at certain points in time |
US9146679B2 (en) * | 2011-06-18 | 2015-09-29 | International Business Machines Corporation | Effectively limitless apparent free space on storage device |
US9087010B2 (en) * | 2011-12-15 | 2015-07-21 | International Business Machines Corporation | Data selection for movement from a source to a target |
US9779008B2 (en) * | 2012-02-21 | 2017-10-03 | Disney Enterprises, Inc. | File monitoring |
US10157184B2 (en) | 2012-03-30 | 2018-12-18 | Commvault Systems, Inc. | Data previewing before recalling large data files |
GB2504716A (en) * | 2012-08-07 | 2014-02-12 | Ibm | A data migration system and method for migrating data objects |
US9633216B2 (en) | 2012-12-27 | 2017-04-25 | Commvault Systems, Inc. | Application of information management policies based on operation with a geographic entity |
US9459968B2 (en) | 2013-03-11 | 2016-10-04 | Commvault Systems, Inc. | Single index to query multiple backup formats |
US9298752B2 (en) * | 2013-08-26 | 2016-03-29 | Dropbox, Inc. | Facilitating data migration between database clusters while the database continues operating |
US9514164B1 (en) | 2013-12-27 | 2016-12-06 | Accenture Global Services Limited | Selectively migrating data between databases based on dependencies of database entities |
US9798596B2 (en) | 2014-02-27 | 2017-10-24 | Commvault Systems, Inc. | Automatic alert escalation for an information management system |
US9648100B2 (en) | 2014-03-05 | 2017-05-09 | Commvault Systems, Inc. | Cross-system storage management for transferring data across autonomous information management systems |
US9823978B2 (en) | 2014-04-16 | 2017-11-21 | Commvault Systems, Inc. | User-level quota management of data objects stored in information management systems |
US9740574B2 (en) | 2014-05-09 | 2017-08-22 | Commvault Systems, Inc. | Load balancing across multiple data paths |
US10860237B2 (en) | 2014-06-24 | 2020-12-08 | Oracle International Corporation | Storage integrated snapshot cloning for database |
US11249858B2 (en) | 2014-08-06 | 2022-02-15 | Commvault Systems, Inc. | Point-in-time backups of a production application made accessible over fibre channel and/or ISCSI as data sources to a remote application by representing the backups as pseudo-disks operating apart from the production application and its host |
US9852026B2 (en) | 2014-08-06 | 2017-12-26 | Commvault Systems, Inc. | Efficient application recovery in an information management system based on a pseudo-storage-device driver |
US10387447B2 (en) * | 2014-09-25 | 2019-08-20 | Oracle International Corporation | Database snapshots |
US10346362B2 (en) | 2014-09-26 | 2019-07-09 | Oracle International Corporation | Sparse file access |
US9444811B2 (en) | 2014-10-21 | 2016-09-13 | Commvault Systems, Inc. | Using an enhanced data agent to restore backed up data across autonomous storage management systems |
US9443550B2 (en) * | 2015-01-30 | 2016-09-13 | Oracle International Corporation | Data storage system providing efficient and secure data migration with tape drive technology |
US9766825B2 (en) | 2015-07-22 | 2017-09-19 | Commvault Systems, Inc. | Browse and restore for block-level backups |
US11068437B2 (en) | 2015-10-23 | 2021-07-20 | Oracle Interntional Corporation | Periodic snapshots of a pluggable database in a container database |
US10296368B2 (en) | 2016-03-09 | 2019-05-21 | Commvault Systems, Inc. | Hypervisor-independent block-level live browse for access to backed up virtual machine (VM) data and hypervisor-free file-level recovery (block-level pseudo-mount) |
KR20170133866A (ko) * | 2016-05-27 | 2017-12-06 | 삼성에스디에스 주식회사 | 데이터 이관 장치 및 방법 |
WO2018037464A1 (ja) * | 2016-08-22 | 2018-03-01 | 株式会社エーピーコミュニケーションズ | ストレージシステム、ストレージ通信装置、ダウンロード方法、及びコンピュータプログラム |
US10838821B2 (en) | 2017-02-08 | 2020-11-17 | Commvault Systems, Inc. | Migrating content and metadata from a backup system |
US10740193B2 (en) | 2017-02-27 | 2020-08-11 | Commvault Systems, Inc. | Hypervisor-independent reference copies of virtual machine payload data based on block-level pseudo-mount |
DE102017203239A1 (de) | 2017-02-28 | 2018-08-30 | Siemens Aktiengesellschaft | Verfahren und Speichersystem zum Speichern von einer Vielzahl von Dateneinheiten |
US10891069B2 (en) | 2017-03-27 | 2021-01-12 | Commvault Systems, Inc. | Creating local copies of data stored in online data repositories |
US10776329B2 (en) | 2017-03-28 | 2020-09-15 | Commvault Systems, Inc. | Migration of a database management system to cloud storage |
US11074140B2 (en) | 2017-03-29 | 2021-07-27 | Commvault Systems, Inc. | Live browsing of granular mailbox data |
US10496318B1 (en) * | 2017-04-28 | 2019-12-03 | EMC IP Holding Company LLC | System and method for capacity management in multi-tiered storage |
US10664352B2 (en) | 2017-06-14 | 2020-05-26 | Commvault Systems, Inc. | Live browsing of backed up data residing on cloned disks |
US10817203B1 (en) * | 2017-08-29 | 2020-10-27 | Amazon Technologies, Inc. | Client-configurable data tiering service |
US10795927B2 (en) | 2018-02-05 | 2020-10-06 | Commvault Systems, Inc. | On-demand metadata extraction of clinical image data |
US10761942B2 (en) | 2018-03-12 | 2020-09-01 | Commvault Systems, Inc. | Recovery point objective (RPO) driven backup scheduling in a data storage management system using an enhanced data agent |
US10789387B2 (en) | 2018-03-13 | 2020-09-29 | Commvault Systems, Inc. | Graphical representation of an information management system |
US11068460B2 (en) | 2018-08-06 | 2021-07-20 | Oracle International Corporation | Automated real-time index management |
US10929166B2 (en) | 2018-10-19 | 2021-02-23 | Hewlett Packard Enterprise Development Lp | Enhanced data storage of virtual nodes in a data processing environment |
US10860443B2 (en) | 2018-12-10 | 2020-12-08 | Commvault Systems, Inc. | Evaluation and reporting of recovery readiness in a data storage management system |
US11086549B2 (en) | 2019-05-21 | 2021-08-10 | International Business Machines Corporation | Just-in-time data migration in a live system |
US11429564B2 (en) | 2019-06-18 | 2022-08-30 | Bank Of America Corporation | File transferring using artificial intelligence |
US11308034B2 (en) | 2019-06-27 | 2022-04-19 | Commvault Systems, Inc. | Continuously run log backup with minimal configuration and resource usage from the source machine |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5276867A (en) * | 1989-12-19 | 1994-01-04 | Epoch Systems, Inc. | Digital data storage system with improved data migration |
US5317728A (en) * | 1990-09-07 | 1994-05-31 | International Business Machines Corporation | Storage management of a first file system using a second file system containing surrogate files and catalog management information |
US5333315A (en) * | 1991-06-27 | 1994-07-26 | Digital Equipment Corporation | System of device independent file directories using a tag between the directories and file descriptors that migrate with the files |
US5367698A (en) * | 1991-10-31 | 1994-11-22 | Epoch Systems, Inc. | Network file migration system |
US5479656A (en) * | 1992-05-13 | 1995-12-26 | Rawlings, Iii; Joseph H. | Method and system for maximizing data files stored in a random access memory of a computer file system and optimization therefor |
US5506986A (en) * | 1992-07-14 | 1996-04-09 | Electronic Data Systems Corporation | Media management system using historical data to access data sets from a plurality of data storage devices |
US5495607A (en) * | 1993-11-15 | 1996-02-27 | Conner Peripherals, Inc. | Network management system having virtual catalog overview of files distributively stored across network domain |
-
1995
- 1995-03-29 US US08/413,056 patent/US5564037A/en not_active Expired - Lifetime
-
1996
- 1996-03-29 AT AT96909887T patent/ATE328324T1/de not_active IP Right Cessation
- 1996-03-29 JP JP8529648A patent/JPH11511272A/ja not_active Ceased
- 1996-03-29 BR BR9608000A patent/BR9608000A/pt not_active IP Right Cessation
- 1996-03-29 EP EP96909887A patent/EP0818006B1/en not_active Expired - Lifetime
- 1996-03-29 AU AU53252/96A patent/AU694022B2/en not_active Ceased
- 1996-03-29 RU RU97117860/09A patent/RU2190248C2/ru not_active IP Right Cessation
- 1996-03-29 CN CN96194019A patent/CN1079552C/zh not_active Expired - Fee Related
- 1996-03-29 WO PCT/US1996/004266 patent/WO1996030839A1/en active IP Right Grant
- 1996-03-29 DE DE69636192T patent/DE69636192T2/de not_active Expired - Lifetime
- 1996-03-29 KR KR1019970706734A patent/KR100446339B1/ko not_active IP Right Cessation
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2488876C2 (ru) * | 2005-04-20 | 2013-07-27 | Акссана (Израэль) Лтд. | Способ и устройство защиты данных |
RU2751798C2 (ru) * | 2019-12-31 | 2021-07-19 | Банк ВТБ (публичное акционерное общество) | Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц |
RU2751798C9 (ru) * | 2019-12-31 | 2021-11-16 | Банк ВТБ (публичное акционерное общество) | Способ распределенной миграции клиентских данных с учетом дубликатов юридических и физических лиц |
Also Published As
Publication number | Publication date |
---|---|
ATE328324T1 (de) | 2006-06-15 |
CN1079552C (zh) | 2002-02-20 |
KR100446339B1 (ko) | 2004-12-08 |
US5564037A (en) | 1996-10-08 |
WO1996030839A1 (en) | 1996-10-03 |
EP0818006A4 (en) | 2000-06-21 |
AU694022B2 (en) | 1998-07-09 |
EP0818006A1 (en) | 1998-01-14 |
DE69636192T2 (de) | 2007-04-05 |
CN1184538A (zh) | 1998-06-10 |
KR19980703329A (ko) | 1998-10-15 |
BR9608000A (pt) | 1999-08-17 |
DE69636192D1 (de) | 2006-07-06 |
AU5325296A (en) | 1996-10-16 |
JPH11511272A (ja) | 1999-09-28 |
EP0818006B1 (en) | 2006-05-31 |
MX9707374A (es) | 1998-03-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2190248C2 (ru) | Система перемещения данных в реальном времени и способ применения разреженных файлов | |
CA2308681C (en) | Method and apparatus for storage of data | |
US5287459A (en) | Method and apparatus for reducing response time in automated library data retrieval systems | |
US5805864A (en) | Virtual integrated cartridge loader for virtual tape storage system | |
US5491807A (en) | System and method for worm volume management of new and updated data files using variable threshold block addresses | |
US6269382B1 (en) | Systems and methods for migration and recall of data from local and remote storage | |
US6925525B2 (en) | Data storage management system and method | |
US7353242B2 (en) | File server for long term data archive | |
JP2005501317A (ja) | 外部データ記憶装置管理システムおよび方法 | |
US6449607B1 (en) | Disk storage with modifiable data management function | |
US20050216532A1 (en) | System and method for file migration | |
US8001327B2 (en) | Method and apparatus for managing placement of data in a tiered storage system | |
US20090070444A1 (en) | System and method for managing supply of digital content | |
US20020069280A1 (en) | Method and system for scalable, high performance hierarchical storage management | |
JP2007073039A (ja) | 内容ベースの予見的ストレージ管理を提供するシステム、プログラム製品、方法、およびコンピュータ・ソフトウェア | |
US20070220205A1 (en) | Nas with worm function | |
JPH07281940A (ja) | データ記憶システム・スペース割振り自動化方法及びシステム | |
US20030037019A1 (en) | Data storage and retrieval apparatus and method of the same | |
EP1215590B1 (en) | Method and system for scalable, high performance hierarchical storage management | |
JP2774691B2 (ja) | ファイルシステム | |
CA2216723C (en) | Real time data migration system and method employing sparse files | |
MXPA97007374A (en) | Real-time data migration system ymetodo that uses esca files | |
JP3313207B2 (ja) | 情報記憶装置及び情報管理方法 | |
JPH06175895A (ja) | 文書作成・電子ファイリング装置 | |
JP2000155707A (ja) | ファイルシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20060330 |