[發(fā)明專利]一種分布式海量非結(jié)構(gòu)化數(shù)據(jù)備份方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201810961531.5
• 申請(qǐng)日: 2018-08-22
• 公開（公告）號(hào): CN109144783B
• 公開（公告）日: 2020-08-18
• 發(fā)明（設(shè)計(jì)）人: 王仁杰;李正祥;張有成
• 申請(qǐng)（專利權(quán)）人: 南京壹進(jìn)制信息科技有限公司
• 主分類號(hào): G06F11/14
• 分類號(hào): G06F11/14
• 代理公司: 南京縱橫知識(shí)產(chǎn)權(quán)代理有限公司 32224
• 代理人: 董建林

1.一種分布式海量非結(jié)構(gòu)化數(shù)據(jù)的備份方法，其特征是，包括多個(gè)生產(chǎn)服務(wù)器、和后端服務(wù)器，多個(gè)生產(chǎn)服務(wù)器協(xié)同將共享存儲(chǔ)中數(shù)據(jù)備份至后端服務(wù)器，具體包括以下過程：

步驟S1， 依據(jù)各生產(chǎn)服務(wù)器的性能指標(biāo)計(jì)算確定對(duì)應(yīng)各生產(chǎn)服務(wù)器的性能權(quán)重；

步驟S2，當(dāng)其中一個(gè)生產(chǎn)服務(wù)器接收到將共享存儲(chǔ)中數(shù)據(jù)備份至后端服務(wù)器的備份任務(wù)時(shí)，針對(duì)此備份任務(wù)創(chuàng)建一個(gè)備份進(jìn)程生成相應(yīng)的備份策略；

步驟S3，將備份策略分解成若干個(gè)子進(jìn)程執(zhí)行，并依據(jù)各生產(chǎn)服務(wù)器的性能權(quán)重將所有子進(jìn)程分配至各生產(chǎn)服務(wù)器；

步驟S4，各生產(chǎn)服務(wù)器中所有子進(jìn)程依據(jù)各自的備份策略執(zhí)行，分別將共享存儲(chǔ)中數(shù)據(jù)備份至后端服務(wù)器中；

步驟S5，備份任務(wù)完成后，釋放各子進(jìn)程和備份進(jìn)程資源；

性能權(quán)重是依據(jù)生產(chǎn)服務(wù)器的性能指標(biāo)，采用負(fù)載均衡服務(wù)算法計(jì)算得到的一個(gè)具體數(shù)值，性能權(quán)重?cái)?shù)值越大，代表生產(chǎn)服務(wù)器性能越好；

生產(chǎn)服務(wù)器的性能權(quán)重?cái)?shù)值越大，分配得到的子進(jìn)程數(shù)越多；

所有子進(jìn)程中采用一致性選舉方式選舉一個(gè)子進(jìn)程作為主子進(jìn)程，其他子進(jìn)程為從子進(jìn)程，以主-從方式執(zhí)行，各從子進(jìn)程向主子進(jìn)程匯報(bào)當(dāng)前備份進(jìn)度情況，主子進(jìn)程負(fù)責(zé)匯報(bào)當(dāng)前整體備份任務(wù)進(jìn)展情況，過程中如遇異常，則重新進(jìn)行主-從選舉。

2.一種分布式海量非結(jié)構(gòu)化數(shù)據(jù)的備份系統(tǒng)，包括多個(gè)生產(chǎn)服務(wù)器和后端服務(wù)器，多個(gè)生產(chǎn)服務(wù)器協(xié)同將共享存儲(chǔ)中數(shù)據(jù)備份至后端服務(wù)器，具體包括：

性能權(quán)重計(jì)算模塊，用于依據(jù)各生產(chǎn)服務(wù)器的性能指標(biāo)計(jì)算確定對(duì)應(yīng)各生產(chǎn)服務(wù)器的性能權(quán)重；

備份任務(wù)創(chuàng)建模塊，用于當(dāng)其中一個(gè)生產(chǎn)服務(wù)器接收到將共享存儲(chǔ)中數(shù)據(jù)備份至后端服務(wù)器的備份任務(wù)時(shí)，針對(duì)此備份任務(wù)創(chuàng)建一個(gè)備份進(jìn)程生成相應(yīng)的備份策略；

備份任務(wù)分解模塊，用于將備份策略分解成若干個(gè)子進(jìn)程執(zhí)行，并依據(jù)各生產(chǎn)服務(wù)器的性能權(quán)重將所有子進(jìn)程分配至各生產(chǎn)服務(wù)器；

備份任務(wù)執(zhí)行模塊，用于各生產(chǎn)服務(wù)器中所有子進(jìn)程同時(shí)執(zhí)行，以將共享存儲(chǔ)中數(shù)據(jù)備份至后端服務(wù)器中；

資源回收模塊，用于備份任務(wù)完成后，釋放各子進(jìn)程和備份進(jìn)程資源；

性能權(quán)重是依據(jù)生產(chǎn)服務(wù)器的性能指標(biāo)，采用負(fù)載均衡服務(wù)算法計(jì)算得到的一個(gè)具體數(shù)值，性能權(quán)重?cái)?shù)值越大，代表生產(chǎn)服務(wù)器性能越好；

備份任務(wù)分解模塊中，生產(chǎn)服務(wù)器的性能權(quán)重?cái)?shù)值越大，分配得到的子進(jìn)程數(shù)越多；

備份任務(wù)執(zhí)行模塊中，所有子進(jìn)程中采用一致性選舉方式選舉一個(gè)子進(jìn)程作為主子進(jìn)程，其他子進(jìn)程為從子進(jìn)程，以主-從方式執(zhí)行，各從子進(jìn)程向主子進(jìn)程匯報(bào)當(dāng)前備份進(jìn)度情況，主子進(jìn)程負(fù)責(zé)匯報(bào)當(dāng)前整體備份任務(wù)進(jìn)展情況，過程中如遇異常，則重新進(jìn)行主-從選舉。