[發(fā)明專利]一種對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法

有效

• 申請?zhí)枺?/td>: 201711143345.2
• 申請日: 2017-11-17
• 公開（公告）號: CN108153804B
• 公開（公告）日: 2021-03-16
• 發(fā)明（設(shè)計）人: 張明富;吳江;李明壯
• 申請（專利權(quán)）人: 極道科技（北京）有限公司;北京榮之聯(lián)科技股份有限公司
• 主分類號: G06F16/16
• 分類號: G06F16/16;G06F16/17
• 代理公司: 北京正理專利代理有限公司 11257
• 代理人: 付生輝

1.一種對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法，其特征在于，包括：

在對稱分布式文件系統(tǒng)中的塊節(jié)點的本地文件系統(tǒng)執(zhí)行文件操作前，為該文件的元數(shù)據(jù)創(chuàng)建具有唯一序列號的文件操作的日志記錄并將操作碼和參數(shù)寫入所述文件操作的日志記錄；

所述本地文件系統(tǒng)執(zhí)行文件操作；

在所述本地文件系統(tǒng)執(zhí)行文件操作后，將執(zhí)行文件操作后文件的屬性信息和完成標志寫入所述文件操作的日志記錄；

在本地文件系統(tǒng)從異常故障中恢復(fù)后掃描各文件操作的日志記錄，對于未寫入完成標志的文件操作的日志記錄：根據(jù)該未寫入完成標志的文件操作的日志記錄中的操作碼和參數(shù)與文件當前的屬性信息進行比對，以確認對應(yīng)的文件操作是否完成，若完成則將完成標志寫入該未寫入完成標志的文件操作的日志記錄，若未完成則刪除該未寫入完成標志的文件操作的日志記錄。

2.根據(jù)權(quán)利要求1所述的對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法，其特征在于，所述文件操作包括：創(chuàng)建目錄操作、刪除目錄操作、創(chuàng)建文件操作、刪除文件操作、設(shè)置目錄屬性操作、設(shè)置文件屬性操作、目錄重命名操作、文件重命名操作和文件寫入數(shù)據(jù)操作。

3.根據(jù)權(quán)利要求2所述的對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法，其特征在于，該方法還包括：

本地文件系統(tǒng)設(shè)定更新時段，當在本地文件系統(tǒng)執(zhí)行文件寫入數(shù)據(jù)操作后的更新時段內(nèi)未出現(xiàn)新的文件寫入數(shù)據(jù)操作請求時，本地文件系統(tǒng)才將文件當前的屬性信息和完成標志寫入文件寫入數(shù)據(jù)操作的日志記錄。

4.根據(jù)權(quán)利要求2所述的對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法，其特征在于，該方法還包括：

各塊節(jié)點的本地文件系統(tǒng)每次提供一批文件的元數(shù)據(jù)中文件操作的日志記錄聚合到總?cè)罩玖鲿r，對于創(chuàng)建目錄操作，以該目錄ID作為關(guān)鍵字選擇時間上首先到來的創(chuàng)建目錄操作的日志記錄合入總?cè)罩玖鳎疫^濾刪除掉時間上后續(xù)到來的重復(fù)日志記錄。

5.根據(jù)權(quán)利要求2所述的對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法，其特征在于，該方法還包括：

各塊節(jié)點的本地文件系統(tǒng)每次提供一批文件的元數(shù)據(jù)中文件操作的日志記錄聚合到總?cè)罩玖鲿r，對于刪除目錄操作，以該目錄ID作為關(guān)鍵字過濾刪除掉時間上先到達的重復(fù)日志，只選擇時間上最后到來的刪除目錄操作的日志記錄合入總?cè)罩玖鳌?/p>

6.根據(jù)權(quán)利要求2所述的對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法，其特征在于，該方法還包括：

當本地文件系統(tǒng)執(zhí)行文件重命名操作的過程中源文件和目標文件不屬于對稱分布式文件系統(tǒng)中同一個塊節(jié)點的本地文件系統(tǒng)時，由源文件所屬的塊節(jié)點的本地文件系統(tǒng)執(zhí)行該文件重命名操作并創(chuàng)建該文件重命名操作的日志記錄。

7.根據(jù)權(quán)利要求6所述的對稱分布式文件系統(tǒng)的元數(shù)據(jù)日志更新方法，其特征在于，該方法還包括：

在數(shù)據(jù)庫導(dǎo)入各塊節(jié)點的本地文件系統(tǒng)中文件的元數(shù)據(jù)中文件操作的日志記錄時，對于文件重命名操作的日志記錄：

檢查被覆蓋的目標文件是否已存在于數(shù)據(jù)庫中，若是則執(zhí)行刪除目標文件的日志記錄并更新源文件的文件名，若否則更新源文件的文件名并將執(zhí)行該文件重命名操作的日志記錄錄入對比表中；

在數(shù)據(jù)庫導(dǎo)入每個創(chuàng)建文件操作的日志記錄前，檢查該文件是否在所述對比表中作為文件重命名操作的日志記錄中的目標文件被覆蓋，若是則忽略該創(chuàng)建文件操作的日志記錄并將所述對比表中的對應(yīng)的文件重命名操作的日志記錄標記為已檢查完成狀態(tài)，在間隔設(shè)定的清除時段后清除該對應(yīng)的文件重命名操作的日志記錄。