[發明專利]分布式存儲系統的服務器及服務器之間的數據同步方法在審
| 申請號: | 201410843521.3 | 申請日: | 2014-12-30 |
| 公開(公告)號: | CN104506643A | 公開(公告)日: | 2015-04-08 |
| 發明(設計)人: | 徐銳波;鄒月明 | 申請(專利權)人: | 北京奇虎科技有限公司;奇智軟件(北京)有限公司 |
| 主分類號: | H04L29/08 | 分類號: | H04L29/08;H04L29/06 |
| 代理公司: | 北京市立方律師事務所 11330 | 代理人: | 王增鑫 |
| 地址: | 100088 北京市西城區新*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 分布式 存儲系統 服務器 之間 數據 同步 方法 | ||
技術領域
本發明涉及分布式存儲服務器端的技術領域,具體而言,本發明涉及一種分布式存儲系統的服務器及服務器之間的數據同步方法。
背景技術
隨著大數據時代的來臨,基于互聯網或者基于通信網絡的服務提供者需要存儲海量的數據,以支持其運營,同時,服務提供者通過對海量數據的分析,可向用戶提供更便利且更具有個性化的服務,從而達到提高其服務水平的目的。
目前,通常由分布式存儲系統來存儲海量的數據。例如,技術人員將服務器集群分散布置,將海量的數據按照某些規則分散存儲在不同的服務器中;這些服務器通常可以根據用戶的請求,為用戶提供數據查詢、數據更新等服務。為了提高數據的安全性和可靠性,分布式存儲系統通常還設置有一定數量的備份服務器,以用于備份數據。
然而,現有的分布式存儲系統的數據同步方法中,備份服務器通常不向用戶提供服務,而只是依據規定的時間間隔,將當前服務器的硬盤中的數據復制到備份服務器中;當當前服務器發生故障重啟后,通常是將整個備份服務器中的數據都傳輸恢復到當前服務器中,傳輸的數據較多,導致數據恢復所花費的時間較長。也就是說,當前服務器從發生故障到設備恢復的時間間隔內,都無法響應涉及當前服務器中任何數據操作請求,這樣會導致用戶請求服務后的等待時間較長,降低了用戶體驗。此外,現有的數據同步方法也容易導致服務器與備份服務器所在的局域網網絡堵塞,影響其他服務器或者備份服務器的正常運行。
因此,現有的分布式存儲系統的數據同步方法具有數據同步耗時較長且花費較高網絡資源的缺陷,進一步地,會產生不能及時響應用戶的請求的情況發生,導致用戶長時間的等待,降低用戶的體驗。
發明內容
本發明針對現有的分布式存儲系統的數據同步方法的缺點,提出一種分布式存儲系統的服務器及服務器之間的數據同步方法,用以解決現有的數字同步方法存在的效率較低的問題。
本發明的技術方案根據一個方面,提供了一種分布式存儲系統中第一服務器端的數據同步方法,包括:
第一服務器接收到數據更新請求,查找與所述數據更新請求中的關鍵字信息相對應的數據分片;
根據所述數據更新請求中的更新數據,更新所述數據分片;
若檢測到設置有與所述數據分片名稱相同的其他數據分片的第二服務器離線,將所述更新數據的更新操作記錄到所述第一服務器的第一日志中,其中,所述第一服務器與第二服務器互為兄弟服務器,其中均設置有相同名稱的數據分片;
響應于所述第二服務器發送的日志同步請求,向第二服務器返回第一日志。
進一步,所述向第二服務器返回第一日志之后,還包括:
接收第二服務器發送的數據同步請求,從中解析出關鍵字信息;
查找本地與解析出的關鍵字信息相應的數據分片;
將查找到的數據分片中的數據返回至第二服務器。
較佳地,所述第一服務器接收到數據更新請求,具體包括:
所述第一服務器預先創建的主控制進程接收多個客戶端發送的數據更新請求;
基于接收到的每個數據更新請求,生成該數據更新請求的工作信道;
所述主控制進程將接收的數據更新請求及相應的工作信道,均勻分配給所述第一服務器預先創建的多個工作進程;
所述工作進程根據分配到的數據更新請求中的關鍵字信息,查找對應的數據分片。
較佳地,所述主控制進程接收多個客戶端發送的數據更新請求,具體包括:
所述主控制進程利用HTTP協議監聽網絡端口;
利用HTTP協議轉換監聽到的數據更新請求的格式,將轉換格式后的數據更新請求作為接收到的數據更新請求。
本發明的技術方案根據另一個方面,還提供了一種分布式存儲系統中第二服務器端的數據同步方法,包括:
向第一服務器發送日志同步請求;
根據接收到的所述第一服務器返回的第一日志,進行數據同步操作,其中,所述第一服務器與第二服務器互為兄弟服務器,其中均設置有相同名稱的數據分片。
較佳地,向第一服務器發送日志同步請求,包括:
當所述第二服務器在上線狀態下,周期性向第一服務器發送日志同步請求;或
當所述第二服務器從離線狀態變更至在線狀態時,向第一服務器發送日志同步請求。
較佳地,根據接收到的所述第一服務器返回的第一日志,進行數據同步操作,具體包括:
將接收到的第一服務器返回的第一日志與本地第二日志相比較,以確定更新操作列表;
根據所述更新操作列表,更新本地相應的數據分片。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京奇虎科技有限公司;奇智軟件(北京)有限公司,未經北京奇虎科技有限公司;奇智軟件(北京)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201410843521.3/2.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種數據存儲系統及存儲和訪問方法
- 下一篇:食物營養分析及健康管理系統





