[發明專利]一種用于信息系統自動運維策略的訓練方法

有效

• 申請號: 202010092042.8
• 申請日: 2020-02-14
• 公開（公告）號: CN111324358B
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 俞揚;秦熔均
• 申請（專利權）人: 南棲仙策（南京）科技有限公司
• 主分類號: G06F8/60
• 分類號: G06F8/60
• 代理公司: 南京樂羽知行專利代理事務所(普通合伙) 32326
• 代理人: 李玉平

1.一種用于信息系統自動運維策略的訓練方法，其特征在于：包括信息系統模擬器構建、策略搜索和遷移優化部署三個部分，其中信息系統模擬器由虛擬用戶生成器、信息系統后臺、虛擬用戶行為策略三部分構建而成；所述信息系統模擬器通過模擬信息系統運維策略、用戶行為策略來生成虛擬的用戶、系統交互數據，這些數據中包含了系統當前配置參數下用戶可感知的服務質量；

所述信息系統模擬器構建包括：

(1)虛擬用戶生成器

該生成器模擬一個周期內，信息系統中的活躍用戶動態變化情況，以及對應的用戶信息，具體步驟如下：

首先，通過人工標注的方法，或聚類算法，將用戶的行為序列，切分為不同的用戶群組；

然后，將切分好的用戶群組按照需要的屬性打上標簽作為訓練數據；

最后，利用以上訓練數據，使用機器學習方法，訓練用戶生成器即可；

(2)信息系統后臺和用戶行為策略訓練：

信息系統模擬器的另外兩個部分，一為信息系統后臺，二為用戶行為策略；前者主要目標為模擬信息系統中的工作流程，并評估所提供的服務質量，后者主要目標則為模擬用戶根據自身屬性，在觀察到系統的服務質量后的行為模式；

由于用戶行為策略和系統所提供的服務質量是互相影響的，因此，將信息系統后臺和用戶行為策略訓練的訓練過程聯合起來，對二者進行迭代訓練；聯合訓練時，信息系統后臺和用戶行為策略訓練過程包括以下步驟：

1)初始化生成隨機參數；

2)使用虛擬用戶生成器生成虛擬用戶集合u；

3)將虛擬用戶集合u作為輸入傳入信息系統后臺，系統后臺根據運維策略配置信號系統參數c；

4)信息系統根據用戶集合u和系統參數c，評估服務質量q；

5)用戶行為策略根據二元組(u,q)確定用戶行為a；

6)根據用戶行為a，信息系統更新活躍用戶集合u；

7)重復步驟3)-6)，直至活躍用戶小于設定閾值或一個周期結束，得到一條交互軌跡；

8)重復步驟7)N次，得到用戶行為序列構成的N條交互軌跡，使用這些軌跡以及學習算法更新信息系統后臺、服務質量評估函數和用戶行為策略；

9)重復步驟2)-8)，直到用完循環次數。

2.如權利要求1所述的用于信息系統自動運維策略的訓練方法，其特征在于：所述策略搜索部分在構建完成的模擬器中搜索最優的運維策略，來動態地、實時地配置系統參數，優化服務質量。

3.如權利要求1所述的用于信息系統自動運維策略的訓練方法，其特征在于：所述遷移優化部署：將模擬環境中搜索得到的自動運維策略部署到真實的信息系統中，對信息系統進行運維；同時，根據真實的運維系統交互數據，對模擬環境以及從中得到的自動運維策略進行增量式修正，以適配真實的信息系統運維。

4.如權利要求1所述的用于信息系統自動運維策略的訓練方法，其特征在于：使用監督學習算法獲得信息系統運維策略、服務質量評估函數和用戶行為策略的流程為：

首先，建立若干神經網絡作為用戶行為策略和信息系統后臺的模型；

其次，將真實信息系統數據整理為數據集D＝{(u,c,q,a,u’)}，每條數據對應一個元組(u,c,q,a,u’)，其中u表示當前用戶集合，c表示配置的系統參數，q為參數c下對應的服務質量，a表示用戶行為，u’表示用戶執行完動作a之后新的用戶集合；

然后，使用真實數據集D中真實的(u,c)作為輸入，真實的服務質量q作為輸出，使用監督學習方法訓練服務質量評估函數；

再次，使用真實數據集D中真實的(u,q)作為輸入，真實的用戶行為a為輸出，使用監督學習方法訓練用戶行為策略；

然后，使用真實數據集D中真實的(u,a)作為輸入，真實的新用戶集合u’為輸出，使用監督學習方法訓練系統后臺；

最后，使用上述訓練后的模型，可作為信息系統模擬器。