[發(fā)明專利]風控日志采集方法、裝置、電子設備及存儲介質

在審

• 申請?zhí)枺?/td>: 202010762814.4
• 申請日: 2020-07-31
• 公開（公告）號: CN111897790A
• 公開（公告）日: 2020-11-06
• 發(fā)明（設計）人: 袁康
• 申請（專利權）人: 平安普惠企業(yè)管理有限公司
• 主分類號: G06F16/18
• 分類號: G06F16/18;G06F16/2457;G06F16/27;G06F11/34
• 代理公司: 深圳市賽恩倍吉知識產權代理有限公司 44334
• 代理人: 劉麗華;孫芬

1.一種風控日志采集方法，其特征在于，所述風控日志采集方法包括：

當接收到日志采集指令時，對所述日志采集指令所指示的數(shù)據(jù)源進行數(shù)據(jù)采集，獲得采集數(shù)據(jù)；

對所述采集數(shù)據(jù)進行過濾整理、格式整理以及預運算整理，獲得整理數(shù)據(jù)；

將所述整理數(shù)據(jù)輸入至風控系統(tǒng)中，獲得風控參數(shù)以及風控結果；

將所述采集數(shù)據(jù)、所述整理數(shù)據(jù)、所述風控參數(shù)以及所述風控結果發(fā)送至消息隊列中，獲得待處理日志；

對所述待處理日志進行數(shù)據(jù)轉換，獲得目標日志；

將所述待處理日志以及所述目標日志進行分布式存儲，獲得分布式風控日志。

2.根據(jù)權利要求1所述的風控日志采集方法，其特征在于，所述對所述待處理日志進行數(shù)據(jù)轉換，獲得目標日志包括：

對所述待處理日志進行預設字符格式轉換，獲得預設字符格式數(shù)據(jù)；

對所待處理日志進行字段映射，獲得映射數(shù)據(jù)，其中，所述待處理日志包括多種字段的數(shù)據(jù)，所述映射數(shù)據(jù)包括兩種不同字段中指定的數(shù)據(jù)組合；

對所述待處理日志進行統(tǒng)計，獲得統(tǒng)計數(shù)據(jù)；

將所述預設字符格式數(shù)據(jù)、所述映射數(shù)據(jù)以及所述統(tǒng)計數(shù)據(jù)確定為所述目標日志。

3.根據(jù)權利要求2所述的風控日志采集方法，其特征在于，所述對所述待處理日志進行統(tǒng)計，獲得統(tǒng)計數(shù)據(jù)包括：

對所述待處理日志進行聚合統(tǒng)計，獲得目標字段的次數(shù)；

對所述待處理日志進行詞頻統(tǒng)計，獲得目標詞匯的頻率；

對所述待處理日志進行特征統(tǒng)計，獲得目標特征的頻率；

將所述目標字段的次數(shù)、所述目標詞匯的頻率以及所述目標特征的頻率確定為統(tǒng)計數(shù)據(jù)。

4.根據(jù)權利要求1所述的風控日志采集方法，其特征在于，所述對所述采集數(shù)據(jù)進行格式整理、過濾整理以及預運算整理，獲得整理數(shù)據(jù)包括：

根據(jù)預設的數(shù)據(jù)格式，對所述采集數(shù)據(jù)進行數(shù)據(jù)格式轉換，獲得格式數(shù)據(jù)；

根據(jù)預設的過濾規(guī)則，對所述格式數(shù)據(jù)進行冗余過濾、錯誤過濾以及異常過濾，以刪除所述格式數(shù)據(jù)中的冗余數(shù)據(jù)、錯誤數(shù)據(jù)以及異常數(shù)據(jù)，獲得過濾數(shù)據(jù)；

根據(jù)預設的預運算公式，對所述采集數(shù)據(jù)進行預運算，獲得預運算數(shù)據(jù)，其中，所述預運算數(shù)據(jù)包括多個數(shù)據(jù)的和、多個數(shù)據(jù)的均值以及滿足預設條件的多個數(shù)據(jù)組成的數(shù)據(jù)集；

將所述過濾數(shù)據(jù)以及所述預運算數(shù)據(jù)確定為所述整理數(shù)據(jù)。

5.根據(jù)權利要求1至4中任一項所述的風控日志采集方法，其特征在于，所述將所述待處理日志以及所述目標日志進行分布式存儲，獲得分布式風控日志之后，所述風控日志采集方法還包括：

通過分布式查詢，獲得目標日志數(shù)據(jù)；

根據(jù)所述目標日志數(shù)據(jù)，生成目標表格；

輸出所述目標表格。

6.根據(jù)權利要求1至4中任一項所述的風控日志采集方法，其特征在于，所述數(shù)據(jù)源包括征信數(shù)據(jù)、黑名單數(shù)據(jù)、身份信息數(shù)據(jù)、聯(lián)系人數(shù)據(jù)。

7.根據(jù)權利要求1至4中任一項所述的風控日志采集方法，其特征在于，所述消息隊列中的所述采集數(shù)據(jù)對應多個主題，一種數(shù)據(jù)源的采集數(shù)據(jù)對應一個主題；所述消息隊列中的所述整理數(shù)據(jù)對應多個主題，一種數(shù)據(jù)源的整理數(shù)據(jù)對應一個主題；所述整理數(shù)據(jù)與所述采集數(shù)據(jù)對應不同的主題。

8.一種風控日志采集裝置，其特征在于，所述風控日志采集裝置包括：

采集模塊，用于當接收到日志采集指令時，對所述日志采集指令所指示的數(shù)據(jù)源進行數(shù)據(jù)采集，獲得采集數(shù)據(jù)；

整理模塊，用于對所述采集數(shù)據(jù)進行過濾整理、格式整理以及預運算整理，獲得整理數(shù)據(jù)；

輸入模塊，用于將所述整理數(shù)據(jù)輸入至風控系統(tǒng)中，獲得風控參數(shù)以及風控結果；

發(fā)送模塊，用于將所述采集數(shù)據(jù)、所述整理數(shù)據(jù)、所述風控參數(shù)以及所述風控結果發(fā)送至消息隊列中，獲得待處理日志；

轉換模塊，用于對所述待處理日志進行數(shù)據(jù)轉換，獲得目標日志；

存儲模塊，用于將所述待處理日志以及所述目標日志進行分布式存儲，獲得分布式風控日志。