[發明專利]基于分布式數據庫的數據備份方法及其系統在審
| 申請號: | 201310595338.1 | 申請日: | 2013-11-21 |
| 公開(公告)號: | CN103810060A | 公開(公告)日: | 2014-05-21 |
| 發明(設計)人: | 楊艷杰;劉臻 | 申請(專利權)人: | 北京奇虎科技有限公司;奇智軟件(北京)有限公司 |
| 主分類號: | G06F11/14 | 分類號: | G06F11/14;G06F17/30 |
| 代理公司: | 北京國昊天誠知識產權代理有限公司 11315 | 代理人: | 許志勇 |
| 地址: | 100088 北京市西城區新*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 基于 分布式 數據庫 數據 備份 方法 及其 系統 | ||
技術領域
本發明涉及數據庫應用技術領域,尤其是一種基于分布式數據庫的數據備份方法及其系統。
背景技術
MongoDB是一種基于分布式文件存儲的數據庫,能夠為WEB應用提供可擴展的高性能數據存儲解決方案。
Mongodb擁有眾多優點,已經被越來越多的企業用于重要的生產環境中。在這種情況下,數據的備份是至關重要的。Mongodb提供數據備份功能,主要工作原理為:將數據庫中oplog.rs(更新日志記錄庫)中的所有數據完整導出到本地文件以json形式進行存放。
但是,現有技術中的分布式數據庫的數據備份方案存在下列缺點:
(1)每一次備份都需要將數據完整地導出,導致消耗大量磁盤讀寫資源,并且反復完整導出會存在大量重復數據,浪費服務器磁盤空間。
(2)只能夠將數據導出為一個文件,如果數據量較大,那么將產生一個很大的文件,導致占用較大的存儲空間。
(3)無法進行實時流備份,最新的數據得不到及時的備份,因此災難后數據很難恢復到完整狀態。
發明內容
本發明的主要目的在于提供一種基于分布式數據庫的數據備份方法及其系統,以解決現有技術中存在的分布式數據庫的完整的數據備份導致消耗大量磁盤讀寫資源以及浪費磁盤空間的技術問題。
為解決上述問題,根據本發明的一個方面提供一種數據備份方法,包括:設置數據備份開始時間點和備份停止時間點;確定數據備份開始時間點和備份停止時間點之間的數據,并對確定的數據進行備份。
其中,所述對確定的數據進行備份的步驟包括:設置備份文件大小閾值;將確定的數據按照順序導入至多個備份文件,其中,每個備份文件大小不大于所述備份文件大小閾值。
其中,所述方法還包括:監控所述分布式數據庫的更新日志文件,判斷所述更新日志文件是否被寫入信息;若是則對寫入信息對應的數據進行數據備份。
其中,所述方法還包括:生成時間戳標記文件,將所述更新日志文件被寫入信息的時間信息記錄至所述時間戳標記文件。
其中,所述方法還包括:當重新開始進行數據備份時,根據所述時間戳標記文件確定上一次終止的時間位置繼續進行數據備份。
根據本發明的另一個方面提供一種數據備份系統,包括:設置模塊,用于設置數據備份開始時間點和備份停止時間點;數據備份模塊,用于確定數據備份開始時間點和備份停止時間點之間的數據,并對確定的數據進行備份。
其中,所述數據備份模塊包括:閾值設置模塊,用于設置備份文件大小閾值;數據導入模塊,用于將確定的數據按照順序導入至多個備份文件,其中,每個備份文件大小不大于所述備份文件大小閾值。
其中,所述系統還包括:監控模塊,用于監控所述分布式數據庫的更新日志文件;判斷模塊,用于判斷所述更新日志文件是否被寫入信息,若是則所述數據備份模塊對寫入信息對應的數據進行數據備份。
其中,所述系統還包括:生成模塊,用于生成時間戳標記文件;時間記錄模塊,用于將所述更新日志文件被寫入信息的時間信息記錄至所述時間戳標記文件。
其中,當所述數據備份模塊重新開始進行數據備份時,根據所述時間戳標記文件確定上一次終止的時間位置繼續進行數據備份。
根據本發明的技術方案,通過設置數據備份開始時間點和備份停止時間點,并備份時間起止點之間的數據,能夠實現按需進行數據備份,從而節省磁盤讀寫資源,并節約磁盤空間。
上述說明僅是本發明技術方案的概述,為了能夠更清楚了解本發明的技術手段,而可依照說明書的內容予以實施,并且為了讓本發明的上述和其它目的、特征和優點能夠更明顯易懂,以下特舉本發明的具體實施方式。
附圖說明
通過閱讀下文優選實施方式的詳細描述,各種其他的優點和益處對于本領域普通技術人員將變得清楚明了。附圖僅用于示出優選實施方式的目的,而并不認為是對本發明的限制。而且在整個附圖中,用相同的參考符號表示相同的部件。在附圖中:
圖1是根據本發明一個實施例的數據備份方法的流程圖;
圖2是根據本發明另一實施例的數據備份方法的流程圖;
圖3是根據本發明實施例的實時流備份方法的流程圖;
圖4是根據本發明一個實施例的數據備份系統的結構框圖;
圖5是根據本發明另一實施例的數據備份系統的結構框圖;
圖6是根據本發明再一實施例的數據備份系統的結構框圖。
具體實施方式
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京奇虎科技有限公司;奇智軟件(北京)有限公司,未經北京奇虎科技有限公司;奇智軟件(北京)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201310595338.1/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





