[發明專利]一種風控系統完備性監控方法和系統

在審

• 申請號: 201910010474.7
• 申請日: 2019-01-07
• 公開（公告）號: CN111414291A
• 公開（公告）日: 2020-07-14
• 發明（設計）人: 支亞君;郭安;王業
• 申請（專利權）人: 北京智融網絡科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明公開了一種風控系統完備性監控方法和系統，方法包括：基于在線分類系統對數據源進行特征計算，并提取第一特征數據；將上述數據源和第一特征數據進行收集，并按照統一的格式存儲在離線分類系統中的數據庫中；基于離線分類系統，對所述數據源進行特征計算，并得到第二特征數據；獲取上述第一特征數據和第二特征數據，并由此進行數據展示和/或數據分析；其中，所述在線分類系統和離線分類系統采用相同的數據處理方法和算法。通過每日定時模擬離線計算過程，并將計算的特征與在線系統的計算結果進行對比，以此發現離線風控系統的完備性問題。

技術領域

本發明屬于一種監控系統，尤其是指一種用于風控系統完備性的監控方法和系統。

背景技術

風控系統中，對于真實性以及完備性的要求比較高。

目前，傳統方式采用數據源、算子單獨監控，由于數據源比較繁多且算子邏輯問題的難以察覺，導致很多情況無法起到監控的效果，直接影響了離線風控系統的真實性。

發明內容

本發明所要解決的技術問題是提供一種風控系統完備性監控方法和系統。

本發明解決上述技術問題所采取的技術方案如下：

一種風控系統完備性監控方法，包括：

基于在線分類系統對數據源進行特征計算，并提取第一特征數據；

將上述數據源和第一特征數據進行收集，并按照統一的格式存儲在離線分類系統中的數據庫中；

基于離線分類系統，對所述數據源進行特征計算，并得到第二特征數據；

獲取上述第一特征數據和第二特征數據，并由此進行數據展示和/或數據分析；

其中，所述在線分類系統和離線分類系統采用相同的數據處理方法和算法。

優選的是，所述數據源中包括：用戶年齡、性別和工作所在地信息。

優選的是，基于離線分類系統，對所述數據源進行特征計算，并得到第二特征數據，是基于spark分布式計算系統來進行并行計算。

優選的是，獲取上述第一特征數據和第二特征數據，并由此進行數據分析，包括：

獲取上述第一特征數據和第二特征數據，兩者進行比較diff計算；

區分哪些特征存在diff、diff的比例是多少、哪些是新增的diff、通過觀察diff結果以及diff的變化趨勢。

優選的是，上述數據源，為每日的數據源；

基于每日定時計算并比較在線分類系統的第一特征數據和離線分類系統中的第二特征數據，實現風控系統完備性監控。

一種風控系統完備性監控系統，包括：

在線分類系統，用于對數據源進行特征計算，并提取第一特征數據；

數據收集和數據存儲系統，用于將上述數據源和第一特征數據進行收集，并按照統一的格式存儲在離線分類系統中的數據庫中；

離線分類系統，用于對所述數據源進行特征計算，并得到第二特征數據；

數據展示和比較系統，用于獲取上述第一特征數據和第二特征數據，并由此進行數據展示和/或數據分析；

其中，所述在線分類系統和離線分類系統采用相同的數據處理方法和算法。

優選的是，所述數據源中包括：用戶年齡、性別和工作所在地信息。

優選的是，所述離線分類系統，對所述數據源進行特征計算，并得到第二特征數據，是基于spark分布式計算系統來進行并行計算。