[發明專利]一種監控模型訓練的方法及裝置在審
| 申請號： | 201910458041.8 | 申請日： | 2019-05-29 |
| 公開（公告）號： | CN110175679A | 公開（公告）日： | 2019-08-27 |
| 發明（設計）人： | 周可;劉俊杰;邸帥;盧道和 | 申請（專利權）人： | 深圳前海微眾銀行股份有限公司 |
| 主分類號： | G06N20/00 | 分類號： | G06N20/00;G06Q40/02 |
| 代理公司： | 北京同達信恒知識產權代理有限公司 11291 | 代理人： | 黃志華 |
| 地址： | 518027 廣東省深圳市*** | 國省代碼： | 廣東;44 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 監控指標 監控信息 告警 監控模型 上報 機器學習 接收機器 金融領域 模型訓練 信息觸發 學習平臺 運維 報警 監控 保證 維護 | ||
1.一種監控模型訓練的方法，其特征在于，所述方法包括：
接收機器學習平臺中的至少一個節點分別上報的監控信息，所述監控信息為所述至少一個節點通過執行一個或多個模型訓練任務生成的；
根據所述至少一個節點分別對應的監控信息，確定所述一個或多個模型訓練任務的監控指標以及所述監控指標對應的信息；所述監控指標表征所述一個或多個模型訓練任務的執行信息；
若確定所述監控指標對應的信息觸發所述監控指標對應的告警規則，則執行告警。
2.根據權利要求1所述的方法，其特征在于，所述監控指標包括以下任意一項或任意多項：
所述一個或多個模型訓練任務的執行結果、執行所述一個或多個模型訓練任務所消耗的計算資源、執行所述一個或多個模型訓練任務的數據存儲情況。
3.根據權利要求1所述的方法，其特征在于，所述方法還包括：
確定所述至少一個節點中處于運行狀態的目標節點；
向所述目標節點發送狀態請求消息，并接收所述目標節點根據所述狀態請求消息發送的所述目標節點的執行狀態；
若確定所述目標節點的執行狀態觸發所述目標節點對應的告警規則，則執行告警。
4.根據權利要求3所述的方法，其特征在于，所述確定所述目標節點的執行狀態觸發所述目標節點對應的告警規則，包括：
所述目標節點為模型訓練啟動節點，若所述目標節點在第一預設時間段內重啟所述模型訓練任務的次數大于預設次數，則確定所述目標節點的執行狀態觸發所述目標節點對應的告警規則；或者，
所述目標節點為模型訓練任務管理節點，若所述目標節點無法執行所述模型訓練任務的時長大于預設時長，則確定所述目標節點的執行狀態觸發所述目標節點對應的告警規則；或者，
所述目標節點為模型訓練資源管理節點，若所述目標節點占用的資源數據量大于第一預設數據量，則確定所述目標節點的執行狀態觸發所述目標節點對應的告警規則；或者，
所述目標節點為模型訓練數據節點，若所述目標節點可用的數據存儲空間的數據量小于第二預設數據量，則確定所述目標節點的執行狀態觸發所述目標節點對應的告警規則。
5.一種監控模型訓練的裝置，其特征在于，所述裝置包括：
收發模塊，用于接收機器學習平臺中的至少一個節點分別上報的監控信息，所述監控信息為所述至少一個節點通過執行一個或多個模型訓練任務生成的；
處理模塊，用于根據所述至少一個節點分別對應的監控信息，確定所述一個或多個模型訓練任務的監控指標以及所述監控指標對應的信息；所述監控指標表征所述一個或多個模型訓練任務的執行信息；
告警模塊，用于若確定所述監控指標對應的信息觸發所述監控指標對應的告警規則，則執行告警。
6.根據權利要求5所述的裝置，其特征在于，所述監控指標包括以下任意一項或任意多項：
所述一個或多個模型訓練任務的執行結果、執行所述一個或多個模型訓練任務所消耗的計算資源、執行所述一個或多個模型訓練任務的數據存儲情況。
7.根據權利要求5所述的裝置，其特征在于，所述處理模塊還用于：
確定所述至少一個節點中處于運行狀態的目標節點；
向所述目標節點發送狀態請求消息，并接收所述目標節點根據所述狀態請求消息發送的所述目標節點的執行狀態；
所述告警模塊還用于：若確定所述目標節點的執行狀態觸發所述目標節點對應的告警規則，則執行告警。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于深圳前海微眾銀行股份有限公司，未經深圳前海微眾銀行股份有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201910458041.8/1.html，轉載請聲明來源鉆瓜專利網。
