[發明專利]集群故障恢復時長估算方法、裝置、設備及存儲介質

有效

• 申請號: 201811193572.0
• 申請日: 2018-10-12
• 公開（公告）號: CN109284220B
• 公開（公告）日: 2022-06-21
• 發明（設計）人: 張立新;文靜;張曉偉
• 申請（專利權）人: 深信服科技股份有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

本發明公開了一種集群故障恢復時長估算方法，包括以下步驟：分別獲取分布式存儲集群發生故障前后的集群信息；基于所述集群信息，分別采用Crush算法構建集群發生故障前后對應的對象存儲設備OSD與歸置組PG的拓撲結構；將集群發生故障前后對應的OSD與PG的拓撲結構進行比對，確定發生數據遷移的OSD與PG；基于發生數據遷移的OSD與PG，估算集群故障恢復時長。本發明還公開了一種集群故障恢復時長估算裝置、設備及計算機可讀存儲介質。本發明能夠估算集群故障恢復時長，進而便于客戶了解故障恢復情況。

技術領域

本發明涉及存儲集群技術領域，尤其涉及一種集群故障恢復時長估算方法、裝置、設備及計算機可讀存儲介質。

背景技術

現有分布式存儲集群通常都具有非常大的容量，磁盤是集群數據的最終載體，當集群出現磁盤情況變化時(比如添加、刪除磁盤)，集群原有的數據都會觸發數據的遷移，進而導致集群不健康，特別是當集群已經存儲的數據較多時，數據遷移需要花費一定時間，并且在數據遷移過程中還要占用集群性能，這就會對客戶端的IO造成性能影響。

現有技術比較難以判斷集群存在磁盤變化情況下進行數據遷移所需要花費的時間，因而也就無法估量對客戶端IO性能影響的時間長短，進而無法對客戶端用戶提供指導建議。

發明內容

本發明的主要目的在于提供一種集群故障恢復時長估算方法、裝置、設備及計算機可讀存儲介質，旨在解決如何確定集群故障恢復時長的技術問題。

為實現上述目的，本發明提供一種集群故障恢復時長估算方法，所述集群故障恢復時長估算方法包括以下步驟：

分別獲取分布式存儲集群發生故障前后的集群信息；

基于所述集群信息，分別采用Crush算法構建集群發生故障前后對應的對象存儲設備OSD與歸置組PG的拓撲結構；

將集群發生故障前后對應的OSD與PG的拓撲結構進行比對，確定發生數據遷移的OSD與PG；

基于發生數據遷移的OSD與PG，估算集群故障恢復時長。

可選地，所述集群信息包括：集群的故障域級別、OSD信息以及PG信息，其中，集群的故障域級別包括主機級別、OSD級別，所述OSD信息包括OSD標識，PG信息包括PG標識。

可選地，所述基于發生數據遷移的OSD與PG，估算集群故障恢復時長包括：

基于發生數據遷移的OSD與PG，計算集群中平均每個OSD發生遷移的數據量；

計算遷移所述數據量的時間，以估算集群故障恢復時長。

可選地，所述集群信息還包括：集群當前的總數據量；所述基于發生數據遷移的OSD與PG，計算集群中平均每個OSD發生遷移的數據量包括：

基于發生數據遷移的OSD與PG，確定發生數據遷移的OSD數以及每個發生數據遷移的OSD對應的PG數；

根據發生數據遷移的OSD數以及每個發生數據遷移的OSD對應的PG數，計算發生數據遷移的OSD中平均每個OSD發生數據遷移的PG數，以及根據集群當前的總數據量計算平均每個PG所管理的數據量；

根據平均每個OSD發生數據遷移的PG數、平均每個PG所管理的數據量，計算集群中平均每個OSD發生遷移的數據量。

可選地，在所述計算遷移所述數據量的時間，以估算集群故障恢復時長的步驟之前，所述集群故障恢復時長估算方法還包括：

對集群中OSD所在磁盤的讀寫性能進行抽樣得到抽樣數據；

計算各抽樣數據的算術平均數，并將計算結果作為集群中OSD的平均讀寫性能；

所述計算遷移所述數據量的時間，以估算集群故障恢復時長包括：