[發(fā)明專利]一種分布式強一致性組件

在審

• 申請?zhí)枺?/td>: 202011009782.7
• 申請日: 2020-09-23
• 公開（公告）號: CN111949675A
• 公開（公告）日: 2020-11-17
• 發(fā)明（設(shè)計）人: 晏東;吳曉勇;楊剛
• 申請（專利權(quán)）人: 成都精靈云科技有限公司
• 主分類號: G06F16/23
• 分類號: G06F16/23;G06F16/27
• 代理公司: 成都弘毅天承知識產(chǎn)權(quán)代理有限公司 51230
• 代理人: 孟仕杰

1.一種分布式強一致性組件，其特征在于：包括

編目分區(qū)組，包括多個編目節(jié)點，所述編目節(jié)點用于存儲數(shù)據(jù)，所述編目分區(qū)組的數(shù)據(jù)采用強一致性模式，所述編目分區(qū)組內(nèi)全部編目節(jié)點儲存數(shù)據(jù)成功，則該數(shù)據(jù)儲存成功；

數(shù)據(jù)分區(qū)組，包括多個主數(shù)據(jù)節(jié)點，所述每個主數(shù)據(jù)節(jié)點包含多個從數(shù)據(jù)節(jié)點，所述主數(shù)據(jù)節(jié)點和從數(shù)據(jù)節(jié)點用于儲存數(shù)據(jù)，所述數(shù)據(jù)分區(qū)組的數(shù)據(jù)采用最終一致性模式，所述數(shù)據(jù)分區(qū)組的主數(shù)據(jù)節(jié)點儲存數(shù)據(jù)成功，則該數(shù)據(jù)儲存成功；

協(xié)調(diào)節(jié)點，用于連接應(yīng)用端、數(shù)據(jù)分區(qū)組合數(shù)據(jù)分區(qū)組；

所述編目分區(qū)組和數(shù)據(jù)分區(qū)組采用Raft算法保證數(shù)據(jù)一致性。

2.根據(jù)權(quán)利要求1所述的一種分布式強一致性組件，其特征在于：所述儲存的數(shù)據(jù)包括數(shù)據(jù)文件和事物日志文件。

3.根據(jù)權(quán)利要求2所述的一種分布式強一致性組件，其特征在于：所述事物日志文件由20個64MB的文件構(gòu)成，所述事物日志文件包含一個index編號和數(shù)據(jù)操作內(nèi)容，所述index編號保持遞增狀態(tài)，所述20個文件寫滿后，從第一個文件開始進(jìn)行覆蓋寫入。

4.根據(jù)權(quán)利要求3所述的一種分布式強一致性組件，其特征在于：所述編目分區(qū)組內(nèi)全部編目節(jié)點均對數(shù)據(jù)操作內(nèi)容執(zhí)行成功，則對該事物日志文件執(zhí)行成功，若執(zhí)行失敗，將數(shù)據(jù)操作內(nèi)容回退給事物日志。

5.根據(jù)權(quán)利要求3所述的一種分布式強一致性組件，其特征在于：所述主數(shù)據(jù)節(jié)點對數(shù)據(jù)操作內(nèi)容執(zhí)行成功，則對該事物日志文件執(zhí)行成功，主數(shù)據(jù)節(jié)點將事物日志同步至從數(shù)據(jù)節(jié)點。

6.根據(jù)權(quán)利要求5所述的一種分布式強一致性組件，其特征在于：所述主數(shù)據(jù)節(jié)點將事物日志同步到從數(shù)據(jù)節(jié)點為單線程操作，所述主數(shù)據(jù)節(jié)點執(zhí)行成功一次事物日志記錄一條主序列編號，所述主序列編號按照時間倒序排序，所述主序列編號隨著主數(shù)據(jù)節(jié)點同步至從數(shù)據(jù)節(jié)點形成從序列編號，所述從序列編號同樣按照時間倒序排序，當(dāng)主數(shù)據(jù)和從數(shù)據(jù)同步時，若排序第一的主序列編號和排序第一的從序列編號的差距為一條記錄，則主數(shù)據(jù)節(jié)點將排序第一的主序列編號對應(yīng)的事物日志推送給從數(shù)據(jù)節(jié)點，若排序第一的主序列編號和排序第一的從序列編號的差距超過一條記錄，則將其中未同步的事物日志打包推送給從數(shù)據(jù)節(jié)點。

7.根據(jù)權(quán)利要求6所述的一種分布式強一致性組件，其特征在于：所述從數(shù)據(jù)節(jié)點獲取主數(shù)據(jù)節(jié)點推動的事物日志后，會自動解析事物日志和重放。