[發明專利]一種修復數據的方法和裝置

有效

• 申請號: 201611069108.1
• 申請日: 2016-11-28
• 公開（公告）號: CN108121618B
• 公開（公告）日: 2021-02-12
• 發明（設計）人: 李科
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14
• 代理公司: 北京中博世達專利商標代理有限公司 11274
• 代理人: 申健

本申請實施例提供一種修復數據的方法和裝置，用于減少業務節點修復緩存集群記錄的執行時間，從而提升業務節點的系統性能。方法包括：獲取樣本組，樣本組包括至少一個樣本集合，樣本集合包括緩存集群中的部分記錄；根據樣本組獲取差錯率，差錯率表示樣本組中異常記錄占樣本組中所有記錄的比例，異常記錄是指與數據庫集群中的參考記錄不同的記錄，異常記錄的地址與參考記錄的地址一一對應。若差錯率大于0小于第一閾值，則當緩存集群中的第一集合的摘要與數據庫集群中的第二集合的摘要不同時，根據第二集合修復第一集合中的異常記錄；第一集合包括緩存集群中的部分記錄，第一集合的地址與第二集合的地址一一對應。

技術領域

本發明涉及數據處理技術領域，尤其涉及一種修復緩存數據的方法和裝置。

背景技術

如圖1所示，分布式網絡控制器集群包括緩存集群，數據庫集群和業務集群。其中，緩存集群包括多個緩存節點，數據庫集群包括多個數據庫節點，業務集群包括多個業務節點。

業務節點在寫記錄的過程中，先將記錄寫入數據庫集群，再將記錄寫入緩存集群。由于緩存集群的讀寫性能強于數據庫集群的讀寫性能，因此業務節點一般從緩存集群中讀取記錄。若業務節點檢測到緩存集群中沒有要讀取的記錄(即緩存集群的記錄缺失)，則向數據庫集群發送請求；數據庫集群根據該請求，向業務節點發送所請求的記錄；業務節點接收到數據庫集群發送的記錄后，向數據庫集群發送攜帶該記錄的響應消息。由此可知，若緩存集群的記錄缺失，則增加了業務節點訪問緩存集群中的記錄的開銷，也增加了業務節點訪問數據庫集群中的記錄的開銷。

為了解決上述技術問題，業務節點可以在將記錄寫入緩存集群的過程中，將該記錄持久化到持久化數據庫中，然后，通過對比持久化數據庫和緩存集群中的記錄，從而對緩存集群中的記錄進行修復。具體的：業務節點獲取緩存集群中的部分記錄作為樣本緩存記錄，并在持久化集群中獲取與該樣本緩存記錄的地址相同的樣本持久化記錄；若確定樣本緩存記錄和樣本持久化記錄不相同，則通過對比緩存集群中的所有記錄和持久化數據庫中對應的記錄，找出緩存集群丟失的記錄的地址；最后，利用持久化數據庫中的與丟失的記錄的地址一一對應的記錄，對緩存集群中的丟失的記錄進行修復，從而保證緩存集群中的記錄與持久化數據庫中的記錄一致，即保證緩存集群中的記錄與數據庫集群中的記錄一致。

但是，上述方法，在業務節點修復緩存集群中的丟失的記錄的過程中，需要對比緩存集群中的所有記錄和持久化數據庫中的對應的記錄，因此，增加了業務節點修復緩存集群中的記錄的執行時間，使系統性能下降。

發明內容

本申請提供一種修復數據的方法和裝置，用于減少業務節點修復緩存集群中的記錄的執行時間，從而提升業務節點的系統性能。

為了達到上述目的，本發明的實施例采用如下技術方案：

第一方面，提供一種修復數據的方法，應用于包括緩存集群和數據庫集群的系統中，該方法可以包括：業務節點獲取樣本組，其中，樣本組包括至少一個樣本集合，樣本集合包括緩存集群中的部分記錄。業務節點根據樣本組獲取差錯率，其中，差錯率表示樣本組中異常記錄占樣本組中所有記錄的比例，異常記錄是指與數據庫集群中的參考記錄不同的記錄，異常記錄的地址與參考記錄的地址一一對應。若差錯率大于0小于第一閾值，則當緩存集群中的第一集合的摘要與數據庫集群中的第二集合的摘要不同時，根據第二集合修復第一集合中的異常記錄；其中，第一集合包括緩存集群中的部分記錄，第一集合的地址與第二集合的地址一一對應。由于本發明實施例提供的技術方案中，若緩存集群中的集合與數據庫集群中與該集合對應的集合的摘要相同，則可以不對比緩存集群中的該集合中的每條記錄和數據庫集群中的該每條記錄的參考記錄。因此，可以縮短業務節點確定緩存集群中的異常記錄的執行時間，提升了系統性能。