TW201516655A - 基於分散式文檔系統的資料備份還原系統及方法 - Google Patents

Abstract

一種基於分散式文檔系統的資料備份還原系統，包括：控制模組，用於控制備份還原進程定時備份資料；記錄模組，用於當用戶端對資料進行用戶操作時，記錄下用戶操作資訊；還原模組，用於當分散式文檔系統的主節點出現異常時，控制備份還原進程利用該備份還原進程備份的資料還原資料；讀取模組，用於讀取備份還原進程最近一次的資料備份時間；查看模組，用於以讀取的資料備份時間作為起始時間，讀取該起始時間之後的用戶操作資訊；恢復模組，用於根據該起始時間之後所記錄的用戶操作資訊恢復每個用戶操作。

Description

基於分散式文檔系統的資料備份還原系統及方法

本發明涉及一種資料備份還原系統及方法，尤其涉及一種基於分散式文檔系統的資料備份還原系統及方法。

於運用分散式文檔系統儲存文檔時，通常為單點故障，必須及時備份主節點的元資料資訊，才能保證資料的完整性。分散式文檔系統自身提供的備份還原進程自帶備份功能可以實現備份資料，但是該進程備份的過程存在時間空文檔，於該時間空文檔內的操作出現異常則無法獲得備份，亦無法得到恢復。

鑒於以上內容，有必要提供一種基於分散式文檔系統的資料備份還原系統及方法，以對分散式文檔系統中所有資料操作進行備份還原。

一種基於分散式文檔系統的資料備份還原系統，運行於伺服器上，該系統包括：控制模組，用於控制分散式文檔系統的備份還原進程定時備份分散式文檔系統的資料；記錄模組，用於當用戶端對分散式文檔系統的資料進行用戶操作時，記錄下用戶操作資訊；還原模組，用於當分散式文檔系統的主節點出現異常時，控制所述備份還原進程利用該備份還原進程備份的資料還原該分散式文檔系統的資料；讀取模組，用於讀取所述備份還原進程最近一次的資料備份時間；查看模組，用於以所述讀取的資料備份時間作為起始時間，讀取該起始時間之後的操作資訊；及恢復模組，用於根據該起始時間之後所記錄的操作資訊恢復每個用戶操作。

一種基於分散式文檔系統的資料備份還原方法，該方法運行於伺服器中，該方法包括：控制步驟，控制分散式文檔系統的備份還原進程定時備份分散式文檔系統的資料；記錄步驟，當用戶端對分散式文檔系統的資料進行用戶操作時，記錄下用戶操作資訊；還原步驟，當分散式文檔系統的主節點出現異常時，控制所述備份還原進程利用該備份還原進程備份的資料還原該分散式文檔系統的資料；讀取步驟，讀取所述備份還原進程最近一次的資料備份時間；查看步驟，以所述讀取的資料備份時間作為起始時間，讀取該起始時間之後的操作資訊；及恢復步驟，根據該起始時間之後所記錄的操作資訊恢復每個用戶操作。

相較於習知技術，所述基於分散式文檔系統資料備份還原系統及方法，於分散式文檔系統自身的備份還原的資料備份還原功能之外，提供了於備份還原執行備份還原資料的時間間隔內所執行的用戶操作進行資料備份還原，使得分散式文檔系統的所有資料均可以得到備份和及時還原。

圖1是本發明基於分散式文檔系統資料備份還原系統較佳實施例的運行環境圖。

圖2是本發明中基於分散式文檔系統資料備份還原系統的功能模組圖。

圖3是本發明中基於分散式文檔系統資料備份還原方法較佳實施例的作業流程圖。

如圖1所示，是本發明基於分散式文檔系統的資料備份還原系統較佳實施例的運行環境圖。本實施例中，該分散式文檔系統可為Hadoop，即Hadoop Distributed File System，簡稱HDFS。所述資料備份還原系統10運行於分散式文檔系統1的第一伺服器11中，該第一伺服器11連接於第二伺服器12，該第二伺服器12作為分散式文檔系統的主節點（如Hadoop的NameNode節點）。所述第一伺服器11和第二伺服器12亦可整合為一個伺服器。所述第一伺服器11上運行於分散式文檔系統的備份還原進程（如Hadoop的SecondaryNameNode進程），該備份還原進程用於當主節點出現異常時，對資料進行定時備份及利用備份的資料進行資料還原。所述分散式文檔系統1和多個用戶端2進行通信，使得於所述用戶端2上可以對分散式文檔系統1中的資料（如第一伺服器11與第二伺服器12中的資料）進行操作，該操作包括：新增資料和修改資料。

如圖2所示，是圖1中基於分散式文檔系統資料備份還原系統10的功能模組圖。所述基於分散式文檔系統資料備份還原系統10包括：控制模組100、分析模組101、備份模組102、記錄模組103、還原模組104、讀取模組105、查看模組106、判斷模組107及恢復模組108。所述模組是具有特定功能的軟體程式段，該軟體儲存於電腦可讀儲存介質或其他儲存設備，可被電腦或其他包含處理器的計算裝置執行，從而完成本發明中分散式文檔系統資料備份還原的流程。

控制模組100用於控制所述備份還原進程定時備份分散式文檔系統1的資料，並記錄下每次備份資料的資料備份時間。本實施例中，該定時的時間為一小時，即所述備份還原進程每隔一個小時對分散式文檔系統1的資料進行備份。所述資料可以備份到第一伺服器11中。

分析模組101用於當用戶端2對分散式文檔系統1的資料進行用戶操作時，分析該用戶操作，判斷該用戶操作為新增資料還是修改資料。所述新增資料是指用戶端2上傳資料至分散式文檔系統1中，如從用戶端2上複製一份word文文檔至分散式文檔系統1中。所述修改資料是指於分散式文檔系統1中進行操作，如：創建文檔夾、刪除文檔、修改文檔案名、移動文檔等。

備份模組102用於當所述用戶操作為新增資料時，將用戶新增的資料備份至第一伺服器11中。

記錄模組103用於記錄下該用戶操作資訊，如記錄下新增資料的操作資訊或修改資料的操作資訊。本實施例中，該操作資訊包括，但不限於，用戶操作時間、用戶端2的名稱、運算元據的原始位址和目標位址等。該用戶操作資訊可用日誌（log）的形式進行記錄，如記錄至分散式文檔系統 log中。

還原模組104用於當分散式文檔系統1的主節點出現異常時，控制所述備份還原進程利用該備份還原進程最近一次備份的資料還原該分散式文檔系統1的資料。所述主節點出現異常表現為分散式文檔系統1無法運行。

讀取模組105用於讀取所述備份還原進程最近一次的資料備份時間。

查看模組106用於以所述讀取的資料備份時間作為起始時間，讀取該起始時間之後記錄的所有用戶操作。

判斷模組107用於判斷所述讀取的用戶操作是新增資料還是修改資料。

恢復模組108用於當所讀取的用戶操作是新增資料時，讀取所述備份模組102所備份的該用戶操作對應的新增的資料，並新增該資料以恢復該用戶操作。當所讀取的用戶操作是修改資料時，讀取該修改資料的操作資訊，重新執行該操作。如：該用戶操作為刪除文檔，則該恢復模組108讀取該用戶操作的操作資訊，該操作資訊中包括需要刪除文檔的名稱、文檔的位址等，該恢復模組108根據該操作資訊重新刪除該文檔。

如圖3所示，是本發明基於分散式文檔系統的資料備份還原方法較佳實施例的作業流程圖。

步驟S30，控制模組100控制所述備份還原進程定時備份分散式文檔系統1的資料，並記錄資料備份時間。本實施例中，該定時的時間為一小時，即所述備份還原進程每隔一個小時對分散式文檔系統1的資料進行備份。所述資料可以備份到第一伺服器11中。

步驟S31，當用戶端2對分散式文檔系統1的資料進行用戶操作時，分析模組101分析該用戶操作，判斷該用戶操作為新增資料還是修改資料。所述新增資料是指用戶端2上傳資料至分散式文檔系統1中，如從用戶端2上複製一份word文文檔至分散式文檔系統1中。所述修改資料是指於分散式文檔系統1中進行操作，如：創建文檔夾、刪除文檔、修改文檔案名、移動文檔等。當所述用戶操作為新增資料時，執行步驟S32。當所述用戶操作為修改資料時，直接執行步驟S33。

步驟S32，備份模組102將用戶新增的資料備份至第一伺服器11中，並執行步驟S33。

步驟S33，記錄模組103記錄下該用戶操作資訊，如記錄下新增資料的操作資訊或修改資料的操作資訊。本實施例中，該操作資訊包括，但不限於，用戶操作時間、用戶端2的名稱、運算元據的原始位址和目標位址等。該用戶操作資訊可用日誌（log）的形式進行記錄，如記錄至分散式文檔系統 log中。

步驟S34，當分散式文檔系統1的主節點出現異常時，還原模組104控制所述備份還原進程利用該備份還原進程最近一次備份的資料還原該分散式文檔系統1的資料。所述主節點出現異常表現為分散式文檔系統1無法運行。

步驟S35，讀取模組105讀取備份還原進程最近一次的資料備份時間。步驟S36，查看模組106以所述讀取的資料備份時間作為起始時間，讀取該起始時間之後記錄的所有用戶操作。

步驟S37，判斷模組107用於判斷所述讀取的用戶操作是新增資料還是修改資料。當所述讀取的用戶操作是新增資料時，執行步驟S37。當所述讀取的用戶操作是修改資料時，執行步驟S38。

步驟S38，恢復模組108讀取所述備份模組102所備份的該用戶操作對應的新增的資料，並新增該資料以恢復該用戶操作。

步驟S39，恢復模組108讀取該修改資料的操作資訊，重新執行該操作。如：該用戶操作為刪除文檔，則該恢復模組108讀取該用戶操作的操作資訊，該操作資訊中包括需要刪除文檔的名稱、文檔的位址等，該恢復模組108根據該操作資訊重新刪除該文檔。

綜上所述，本發明符合發明專利要件，爰依法提出專利申請。惟，以上所述者僅爲本發明之較佳實施例，本發明之範圍並不以上述實施例爲限，舉凡熟悉本案技藝之人士爰依本發明之精神所作之等效修飾或變化，皆應涵蓋於以下申請專利範圍內。

1‧‧‧分散式文檔系統

10‧‧‧資料備份還原系統

11‧‧‧第一伺服器

12‧‧‧第二伺服器

2‧‧‧用戶端

100‧‧‧控制模組

101‧‧‧分析模組

102‧‧‧備份模組

103‧‧‧記錄模組

104‧‧‧還原模組

105‧‧‧讀取模組

106‧‧‧查看模組

107‧‧‧判斷模組

108‧‧‧恢復模組

無

10‧‧‧資料備份還原系統

100‧‧‧控制模組

101‧‧‧分析模組

102‧‧‧備份模組

103‧‧‧記錄模組

104‧‧‧還原模組

105‧‧‧讀取模組

106‧‧‧查看模組

107‧‧‧判斷模組

108‧‧‧恢復模組

Claims (8)

1. 一種基於分散式文檔系統的資料備份還原系統，運行於伺服器上，該資料備份還原系統包括：
   控制模組，用於控制分散式文檔系統的備份還原進程定時備份分散式文檔系統的資料；
   記錄模組，用於當用戶端對分散式文檔系統的資料進行用戶操作時，記錄下用戶操作資訊；
   還原模組，用於當分散式文檔系統的主節點出現異常時，控制所述備份還原進程利用該備份還原進程最近一次備份的資料還原該分散式文檔系統的資料；
   讀取模組，用於讀取所述備份還原進程最近一次的資料備份時間；
   查看模組，用於以所述讀取的資料備份時間作為起始時間，讀取該起始時間之後的操作資訊；及
   恢復模組，用於根據該起始時間之後所記錄的操作資訊恢復每個用戶操作。
2. 如申請專利範圍第1項所述之基於分散式文檔系統的資料備份還原系統，該系統還包括：
   分析模組，用於當用戶端對分散式文檔系統的資料進行操作時，分析該用戶操作，判斷該用戶操作為新增資料還是修改資料；及
   備份模組，用於當所述用戶操作為新增資料時，將用戶新增的資料備份至伺服器中。
3. 如申請專利範圍第2項所述之基於分散式文檔系統的資料備份還原系統，所述恢復模組還用於當所述讀取模步驟讀取的用戶操作是新增資料時，讀取所述備份的該用戶操作對應的新增資料，並新增該資料以恢復該用戶操作；或當所述讀取步驟讀取的用戶操作是修改資料時，讀取該修改資料的操作資訊，根據該操作資訊重新執行該操作。
4. 如申請專利範圍第2項所述之基於分散式文檔系統的資料備份還原系統，所述新增資料是指上傳資料至分散式文檔系統，所述修改資料是指於分散式文檔系統中修改資料。
5. 一種基於分散式文檔系統的資料備份還原方法，該方法運行於伺服器中，該方法包括：
   控制步驟，控制分散式文檔系統的備份還原進程定時備份分散式文檔系統的資料；
   記錄步驟，當用戶端對分散式文檔系統的資料進行用戶操作時，記錄下用戶操作資訊；
   還原步驟，當分散式文檔系統的主節點出現異常時，控制所述備份還原進程利用該備份還原進程備份的資料還原該分散式文檔系統的資料；
   讀取步驟，讀取所述備份還原進程最近一次的資料備份時間；
   查看步驟，以所述讀取的資料備份時間作為起始時間，讀取該起始時間之後的操作資訊；及
   恢復步驟，根據該起始時間之後所記錄的操作資訊恢復每個用戶操作。
6. 如申請專利範圍第5項所述之基於分散式文檔系統的資料備份還原方法，該方法於控制步驟之後還包括：
   分析步驟，當用戶端對分散式文檔系統的資料進行操作時，分析該用戶操作，判斷該用戶操作為新增資料還是修改資料；
   備份步驟，當所述用戶操作為新增資料時，將用戶新增的資料備份至伺服器中。
7. 如申請專利範圍第6項所述之基於分散式文檔系統的資料備份還原方法，所述恢復步驟包括：
   當所述讀取模步驟讀取的用戶操作是新增資料時，讀取所述備份的該用戶操作對應的新增資料，並新增該資料以恢復該用戶操作；或
   當所述讀取步驟讀取的用戶操作是修改資料時，讀取該修改資料的操作資訊，根據該操作資訊重新執行該操作。
8. 如申請專利範圍第6項所述之基於分散式文檔系統的資料備份還原方法，所述新增資料是指上傳資料至分散式文檔系統，所述修改資料是指於分散式文檔系統中修改資料。