[發明專利]風控模型的監控方法及裝置

在審

• 申請號: 202010463296.6
• 申請日: 2020-05-27
• 公開（公告）號: CN111625437A
• 公開（公告）日: 2020-09-04
• 發明（設計）人: 張琛;王偉
• 申請（專利權）人: 北京互金新融科技有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34;G06Q10/06
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 董文倩

本發明公開了一種風控模型的監控方法及裝置。其中，該方法包括：根據風控模型的配置文件確定風控模型的產出數據，其中，產出數據包括需要監控的多個模型指標；調用多個監控模塊對產出數據中的多個模型指標進行監控，其中，監控模塊用于監控對應的模型指標。本發明解決了相關技術中線上風控模型上線后，缺乏對模型的實時監控的技術問題。

技術領域

本發明涉及近場通信領域，具體而言，涉及一種風控模型的監控方法及裝置。

背景技術

通常風控模型上線后，開發人員和業務使用方很難監測模型性能的衰退，缺乏對模型性能和業務性能的實時監控，也很難確定模型迭代的周期。目前，模型上線后的監控方案主要是簡單從模型的性能上做監控，缺乏對業務指標的監控和特征的監控。評價標準相對單一，不能夠全面地監控模型各方面的表現，也不能反映模型性能變化的趨勢性，缺乏預警機制。

針對上述的問題，目前尚未提出有效的解決方案。

發明內容

本發明實施例提供了一種風控模型的監控方法及裝置，以至少解決相關技術中線上風控模型上線后，缺乏對模型的實時監控的技術問題。

根據本發明實施例的一個方面，提供了一種風控模型的監控方法，包括：根據風控模型的配置文件確定所述風控模型的產出數據，其中，所述產出數據包括需要監控的多個模型指標；調用多個監控模塊對所述產出數據中的多個所述模型指標進行監控，其中，所述監控模塊用于監控對應的模型指標。

可選的，多個所述模型指標包括所述風控模型的基礎性能參數，業務參數，用戶特征；調用多個監控模塊對所述產出數據中的多個所述模型指標進行監控，其中，所述監控模塊用于監控對應的模型指標包括：調用性能監控模塊監控所述基礎性能參數，所述基礎性能參數包括下列至少之一：AUC指數，KS指數，PSI指數；調用業務監控模塊監控所述業務參數，所述業務參數包括目標業務的用戶數量參數和金額參數；調用特征監控模塊監控所述用戶特征，所述用戶特征包括總用戶特征和壞用戶特征，其中，所述壞用戶為風險超過第一預設風險閾值的用戶。

可選的，所述用戶數量參數包括：所述風控模型用戶的總數量，好用戶的數量，壞用戶的數量，所述好用戶的通過率，壞用戶的攔截率，其中，所述好用戶為風險低于第二預設風險閾值的用戶；所述金額參數包括：總借貸金額，違約金額，違約人數，金額逾期率，余額逾期率。

可選的，調用性能監控模塊監控所述基礎性能參數包括：確定所述基礎性能參數的計算值與預設值的偏移量；在所述偏移量超過預設偏移量的情況下，確定所述基礎性能參數異常；在所述偏移量未超過預設偏移量的情況下，確定所述基礎性能參數正常；在確定所述基礎性能參數異常的情況下，輸出異常的所述基礎性能參數的屬性和發生異常的時間，所述屬性包括下列至少之一：名稱，標識。

可選的，調用業務監控模塊監控所述業務參數包括：實時監控并記錄所述業務參數。

可選的，調用特征監控模塊監控所述用戶特征包括：確定所述用戶特征和所述用戶特征的變化參數，其中，所述變化參數用于體現所述用戶特征的變化情況；在所述用戶特征超出預設數量閾值或者所述變化參數超出預設變化閾值的情況下，確定所述用戶特征異常；在所述用戶特征未超出預設數量閾值且所述變化參數未超出預設變化閾值的情況下，確定所述用戶特征正常；在確定所述用戶特征異常的情況下，輸出所述用戶特征，所述用戶特征的變化參數，和發生異常的時間。

可選的，調用多個監控模塊對所述產出數據中的多個所述模型指標進行監控之后，還包括：按照預設頻率生成監控日志，所述監控日志包括監控的所有模型指標；將所述監控日志存儲在預設的數據庫中。

根據本發明實施例的另一方面，還提供了一種風控模型的監控裝置，包括：確定模塊，用于根據風控模型的配置文件確定所述風控模型的產出數據，其中，所述產出數據包括需要監控的多個模型指標；監控模塊，用于調用多個監控模塊對所述產出數據中的多個所述模型指標進行監控，其中，所述監控模塊用于監控對應的模型指標。