WO2022042514A1 - Procédé et appareil de synchronisation de métadonnées - Google Patents

Procédé et appareil de synchronisation de métadonnées Download PDF

Info

Publication number
WO2022042514A1
WO2022042514A1 PCT/CN2021/114190 CN2021114190W WO2022042514A1 WO 2022042514 A1 WO2022042514 A1 WO 2022042514A1 CN 2021114190 W CN2021114190 W CN 2021114190W WO 2022042514 A1 WO2022042514 A1 WO 2022042514A1
Authority
WO
WIPO (PCT)
Prior art keywords
file
operation log
metadata
stored
identifier
Prior art date
Application number
PCT/CN2021/114190
Other languages
English (en)
Chinese (zh)
Inventor
德语心
彭勇
王英
李浩然
冯阳
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Publication of WO2022042514A1 publication Critical patent/WO2022042514A1/fr

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/178—Techniques for file synchronisation in file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/164—File meta data generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/1734—Details of monitoring file system events, e.g. by the use of hooks, filter drivers, logs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/176—Support for shared access to files; File sharing support

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

Procédé et appareil de synchronisation de métadonnées, qui relèvent du domaine technique du stockage de données. Ledit procédé consiste : à déterminer qu'un événement déclencheur pour synchroniser des métadonnées se produit (201) ; à acquérir au moins un journal d'opération à traiter à partir de journaux d'opération stockés, chaque journal d'opération enregistrant des identifiants de fichier correspondant à des fichiers utilisés par un système de fichiers, des identifiants de répertoire parent correspondant aux fichiers et des métadonnées des fichiers générés après que le système de fichiers exécute des opérations sur les fichiers, et les métadonnées comprenant des informations d'adresse de stockage des fichiers dans le système de fichiers (202) ; et à envoyer, à un système d'objets, des identifiants de fichier, des identifiants de répertoire parent et des métadonnées qui correspondent à des fichiers correspondant à ou aux journaux d'opération à traiter (203), de telle sorte que le système d'objets stocke les identifiants de fichier, les identifiants de répertoire parent et les métadonnées des fichiers reçus en conséquence (204). Ledit procédé peut économiser des ressources de stockage d'un système d'objets.
PCT/CN2021/114190 2020-08-31 2021-08-24 Procédé et appareil de synchronisation de métadonnées WO2022042514A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010901025.4 2020-08-31
CN202010901025.4A CN114116641A (zh) 2020-08-31 2020-08-31 元数据同步的方法和装置

Publications (1)

Publication Number Publication Date
WO2022042514A1 true WO2022042514A1 (fr) 2022-03-03

Family

ID=80352671

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2021/114190 WO2022042514A1 (fr) 2020-08-31 2021-08-24 Procédé et appareil de synchronisation de métadonnées

Country Status (2)

Country Link
CN (1) CN114116641A (fr)
WO (1) WO2022042514A1 (fr)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108153804A (zh) * 2017-11-17 2018-06-12 极道科技（北京）有限公司 一种对称分布式文件系统的元数据日志更新方法
CN110781152A (zh) * 2019-10-09 2020-02-11 济南浪潮数据技术有限公司 一种多协议数据共享架构
CN110807000A (zh) * 2019-10-25 2020-02-18 北京达佳互联信息技术有限公司 一种文件修复方法、装置、电子设备和存储介质
US20200265023A1 (en) * 2019-02-19 2020-08-20 Oracle International Corporation System for transition from a hierarchical file system to an object store

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108153804A (zh) * 2017-11-17 2018-06-12 极道科技（北京）有限公司 一种对称分布式文件系统的元数据日志更新方法
US20200265023A1 (en) * 2019-02-19 2020-08-20 Oracle International Corporation System for transition from a hierarchical file system to an object store
CN110781152A (zh) * 2019-10-09 2020-02-11 济南浪潮数据技术有限公司 一种多协议数据共享架构
CN110807000A (zh) * 2019-10-25 2020-02-18 北京达佳互联信息技术有限公司 一种文件修复方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
CN114116641A (zh) 2022-03-01

Similar Documents

Publication Publication Date Title
US11531482B2 (en) Data deduplication method and apparatus
WO2016086552A1 (fr) Procédé de traitement de fichier et client
WO2019085471A1 (fr) Procédé de synchronisation de bases de données, serveur d'applications, et support de stockage lisible par ordinateur
US20090132775A1 (en) Methods and apparatus for archiving digital data
CN111176549B (zh) 基于云存储的数据存储方法、装置和存储介质
US20170031948A1 (en) File synchronization method, server, and terminal
US10013312B2 (en) Method and system for a safe archiving of data
US11615000B2 (en) Method and backup server for processing expired backups
US11886298B2 (en) Using a storage log to generate an incremental backup
US20190347167A1 (en) Primary Node-Standby Node Data Transmission Method, Control Node, and Database System
WO2017076223A1 (fr) Procédé et système de mise en œuvre d'indexage dans une mémoire de fichiers
CN109885577B (zh) 数据处理方法、装置、终端及存储介质
CN115599747B (zh) 一种分布式存储系统的元数据同步方法、系统及设备
CN110597762A (zh) 文件处理方法、装置、设备及存储介质
US20230325363A1 (en) Time series data layered storage systems and methods
CN113239012B (zh) 一种数据库迁移方法、装置、电子设备和存储介质
CN109144403B (zh) 一种用于云盘模式切换的方法与设备
CN111309799A (zh) 数据合并的实现方法、装置、系统及存储介质
US9870385B2 (en) Computer system, data management method, and computer
CN111831954B (zh) 内容数据更新方法、装置、计算机设备及存储介质
WO2022042514A1 (fr) Procédé et appareil de synchronisation de métadonnées
CN114116611A (zh) 一种文件扫描方法及相关装置
CN111147226A (zh) 数据存储方法、装置及存储介质
CN115098519A (zh) 一种数据存储方法及装置
CN113625952A (zh) 一种对象存储方法、装置、设备及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21860349

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21860349

Country of ref document: EP

Kind code of ref document: A1