[發明專利]數據備份方法及系統

有效

• 申請號: 201510938469.4
• 申請日: 2015-12-15
• 公開（公告）號: CN105373453B
• 公開（公告）日: 2019-07-30
• 發明（設計）人: 劉志丹;杜瑞嶺;劉龍;曹震;于雪龍
• 申請（專利權）人: 中國農業銀行股份有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 薛嬌;王寶筠

本發明實施例公開了一種數據備份方法及系統，建立若干個線程池，將屬于同一個數據存儲目錄的數據分配給同一個線程池，即每個線程池負責一個目錄的數據的備份，每個線程池中的線程負責目錄中不同數據的備份，從而不需要頻繁創建和回收線程，降低CPU資源的消耗，提高了數據備份性能。而且，采用多線程池進行數據備份，加大了并發備份數據分布的范圍，降低了同時備份小文件集的可能性，從而增強了數據備份的穩定性。

技術領域

本發明涉及數據處理技術領域，更具體地說，涉及一種數據備份方法及系統。

背景技術

為了防止計算機中的數據丟失或損壞，需要對計算機中的數據進行備份，以便在數據出現損壞或丟失的時候，可以通過備份的數據進行恢復。

當前的數據備份方案眾多，主要方案有直接備份和多線程備份。直接備份方案簡單，但備份性能差。多線程方案實現方式通常為：每個文件創建一個線程對該文件進行備份。多線程方案較直接備份方案備份性能有所提高。

發明人在實現本發明的過程中發現，目前的多線程備份方法中，文件數等于線程數，需要頻繁創建和回收線程，消耗大量的CPU資源，備份性能仍然較低。

發明內容

本發明的目的是提供一種數據備份方法及系統，以提高備份性能。

為實現上述目的，本發明提供了如下技術方案：

一種數據備份方法，包括：

建立若干個線程池；

按數據存儲目錄獲取待備份數據；

將從同一數據存儲目錄獲取的待備份數據傳輸給所述若干個線程池中的同一個線程池；

線程池中的若干個線程用于對接收到數據進行備份。

上述方法，優選的，線程池對所接收到的數據進行數據備份的過程包括：

將所接收到的待備份數據按數據文件分配給不同的線程進行數據備份。

上述方法，優選的，還包括：

當第一線程池中的所有線程都處于繁忙狀態時，若還有未備份的待備份數據，則將所述待備份數據加入到與所述第一線程池對應的隊列中；所述第一線程池為所述若干個線程池中的任意一個線程池；

當所述第一線程池中有空閑線程時，從與所述第一線程池對應的隊列中讀取一數據文件并分配給該空閑線程進行數據備份。

上述方法，優選的，所述按數據存儲目錄獲取待備份數據基于腳本語言實現；線程池進行數據備份的過程基于java語言實現。

上述方法，優選的，所述腳本語言為：shell腳本語言，或者，Python腳本語言，或者，ruby腳本語言。

一種數據備份系統，包括：

建立模塊，用于建立若干個線程池；

獲取模塊，用于按數據存儲目錄獲取待備份數據；

傳輸模塊，用于將從同一數據存儲目錄獲取的待備份數據傳輸給所述若干個線程池中的同一個線程池；

備份模塊，用于維護所述若干個線程池，線程池中的若干個線程用于對接收到數據進行備份。

上述系統，優選的，所述線程池具體用于，將所接收到的待備份數據按數據文件分配給不同的線程進行數據備份。

上述系統，優選的，還包括：

隊列管理模塊，用于當第一線程池中的所有線程都處于繁忙狀態時，若還有未備份的待備份數據，則將所述待備份數據加入到與所述第一線程池對應的隊列中；所述第一線程池為所述若干個線程池中的任意一個線程池；