[發明專利]故障處理方法、裝置及存儲介質

有效

• 申請號: 202011401057.4
• 申請日: 2020-12-03
• 公開（公告）號: CN112564968B
• 公開（公告）日: 2022-03-29
• 發明（設計）人: 韓明瑞
• 申請（專利權）人: 深圳市騰訊計算機系統有限公司
• 主分類號: H04L41/0631
• 分類號: H04L41/0631;H04L43/106;H04L9/40;H04L67/1097
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;賈允

本公開涉及計算機技術及云技術領域，提供了一種故障處理方法、裝置及存儲介質，該方法通過接收處于同一地域的至少一個服務集群發送的故障處理請求；基于故障處理請求和獲取的令牌集中當前存儲的第一令牌數，向至少一個服務集群下發令牌并更新令牌集中第一令牌數，以使得至少一個服務集群基于獲取的令牌執行故障節點處理操作。由于第一令牌數小于等于當前時間窗口的額定令牌數，通過獲取的分發令牌實現對故障節點的處理操作，避免故障恢復過程中的大量無效降級剔除，降低數據風險，極大提升了分布式系統的可靠性。

技術領域

本公開涉及計算機技術及云技術領域，尤其涉及一種故障處理方法、裝置及存儲介質。

背景技術

在分布式存儲系統中，通常由多個服務節點同時對外提供服務。當至少一個服務節點出現故障時，將會影響整個分布式存儲系統的正常運行，從而對故障節點的處理策略變得尤為重要。

相關技術中，對于檢測到的故障節點，通常采用直接剔除故障節點的處理方式。然而，當故障節點數量較多時，也即發生超過了業務能容忍的范圍的群體性故障時，此時往往通過直接故障剔除不僅并不能有效恢復業務，而且還會導致整地域大量故障節點的剔除發生，進而增加了數據風險。

發明內容

本公開提供了一種故障處理方法、裝置及存儲介質，以解決現有技術中至少一種技術問題。

一方面，本公開提供了一種故障處理方法，應用于全局節點設備，包括：

接收處于同一地域的至少一個服務集群發送的故障處理請求；所述故障處理請求攜帶所屬服務集群的故障節點數量和時間戳；

獲取令牌集中當前存儲令牌的第一令牌數；所述第一令牌數小于等于當前時間窗口的額定令牌數，所述時間窗口是基于所述至少一個服務集群所屬地域的服務節點的歷史恢復時長確定，所述額定令牌數是基于所述至少一個服務集群所屬地域在當前時間窗口的群體性故障的防護閾值確定；

基于所述故障處理請求和所述第一令牌數，確定所述至少一個服務集群的待下發令牌數量；

基于所確定的待下發令牌數量，向所述至少一個服務集群下發令牌并更新所述令牌集中第一令牌數，以使得所述至少一個服務集群基于獲取的令牌執行故障節點處理操作。

另一方面還提供一種故障處理方法，應用于局部節點設備，包括：

在監測到所屬服務集群中服務節點存在異常時，生成故障處理請求；所述故障處理請求攜帶所屬服務集群的故障節點數量和時間戳；

向全局節點設備發送所述故障處理請求，并獲取所述全局節點設備基于所確定的待下發令牌數量所下發的令牌，所述待下發令牌數量是基于所述故障處理請求和令牌集中當前存儲令牌的第一令牌數所確定的；所述第一令牌數小于等于當前時間窗口的額定令牌數，所述時間窗口是基于所述至少一個服務集群所屬地域的服務節點的歷史恢復時長確定，所述額定令牌數是基于所述至少一個服務集群所屬地域在當前時間窗口的群體性故障的防護閾值確定；

基于獲取的令牌執行故障節點處理操作。

另一方面還提供一種故障處理裝置，應用于全局節點設備，包括：

請求接收模塊，用于接收處于同一地域的至少一個服務集群發送的故障處理請求；所述故障處理請求攜帶所屬服務集群的故障節點數量和時間戳；

第一獲取模塊，用于獲取令牌集中當前存儲令牌的第一令牌數；所述第一令牌數小于等于當前時間窗口的額定令牌數，所述時間窗口是基于所述至少一個服務集群所屬地域的服務節點的歷史恢復時長確定，所述額定令牌數是基于所述至少一個服務集群所屬地域在當前時間窗口的群體性故障的防護閾值確定；

確定模塊，用于基于所述故障處理請求和所述第一令牌數，確定所述至少一個服務集群的待下發令牌數量；