[發明專利]基于遺傳算法的數據重構自動調參方法、系統及存儲介質

在審

• 申請號: 202110582674.7
• 申請日: 2021-05-27
• 公開（公告）號: CN113204450A
• 公開（公告）日: 2021-08-03
• 發明（設計）人: 毛貝貝
• 申請（專利權）人: 濟南浪潮數據技術有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14;G06N3/12
• 代理公司: 濟南舜源專利事務所有限公司 37205
• 代理人: 張營磊

1.一種基于遺傳算法的數據重構自動調參方法，其特征在于，包括以下步驟：

S1：引入遺傳算法，在數據恢復控制算法中，累加恢復對象的大小，以及記錄恢復對象的總數和恢復的小對象的數目；

S2：判斷數據恢復場景的類型，根據步驟S1中得到的恢復的不同方式下，恢復個數占總的恢復對象個數的比例，確定選擇最佳參數處理方式；

S3：針對步驟S2確定不同的恢復場景，選用算法權衡權重，匹配不同的參數，從而進行優化不同場景下的恢復參數；

S4：在遺傳算法訓練器中最后清空步驟S1中計數，以便進行下一周期對恢復場景優化恢復參數；

S5：遺傳算法下NVME硬盤的處理步驟；

S6：根據集群規模調整重構速度步驟。

2.根據權利要求1所述的一種基于遺傳算法的數據重構自動調參方法，其特征在于，所述步驟S2中，數據恢復場景類型包括文件、塊、對象；通過定時器定時計算下個恢復周期內，數據恢復總的數據恢復量，然后根據遺傳算法規則進行數據訓練，獲得單次恢復的對象個數最佳參數。

3.根據權利要求2所述的一種基于遺傳算法的數據重構自動調參方法，其特征在于，所述步驟S5中，引入圖形處理器多線程思想機制，獲取圖形處理器線程數，NVME硬盤的大小和gluster存儲的總存儲量的比例信息。

4.根據權利要求3所述的一種基于遺傳算法的數據重構自動調參方法，其特征在于，所述步驟S6中，包括以下步驟：

S6.1：根據遺傳算法，計算出的當前需要重構的數據量的計算方式；學習出當前周期需要重構的數據量的計算方式，集群重構的總由監控器根據重構的硬盤個數進行遺傳算法的計算；

S6.2：在不同重構優先級下，監控器根據重構的主硬盤的個數以及單個硬盤，計算出總的重構數據恢復量，并將總發送給硬盤；

S6.3：在遺傳算法訓練識別參數的流程中，對每個對象處理，并對已恢復的對象計數，若該對象是小對象，則小對象的計數加一；若未能識別該對象的大小，則將該對象插入未知大小的地圖結構中，并記錄未知大小的對象個數；

S6.4：若對象已在補償地圖中，還需要判斷該對象是否在未知大小的地圖中，再判斷該對象是否是小對象，若是，則小對象計數加一。

5.一種基于遺傳算法的數據重構自動調參系統，其特征在于，包括：區分恢復場景模塊，所述區分恢復場景模塊將區分信號發送至計數模塊，計數模塊在不同的恢復場景下，記錄恢復對象的總數和恢復的小對象的數目，以及恢復對象的大小，計數模塊將計數信息發送至匹配參數模塊，匹配參數模塊確定選擇最佳參數處理方式。

6.根據權利要求5所述的一種基于遺傳算法的數據重構自動調參系統，其特征在于，還包括NVME硬盤的處理模塊和調整重構速度模塊，所述NVME硬盤的處理模塊引入圖形處理器多線程思想機制，獲取圖形處理器線程數，NVME硬盤的大小和gluster存儲的總存儲量的比例信息，根據獲取信息設置多線程訓練學習的模型比例，在重構結束恢復默認處理機制。

7.根據權利要求6所述的一種基于遺傳算法的數據重構自動調參系統，其特征在于，所述調整重構速度模塊中，根據遺傳算法，計算出的當前需要重構的數據量的計算方式；學習出當前周期需要重構的數據量的計算方式，集群重構的總由監控器根據重構的硬盤個數進行遺傳算法的計算。

8.根據權利要求7所述的一種基于遺傳算法的數據重構自動調參系統，其特征在于，所述調整重構速度模塊中，在不同重構優先級下，監控器根據重構的主硬盤的個數以及單個硬盤，計算出總的重構數據恢復量，并將總發送給硬盤。