[發明專利]一種風控分析模型的評估方法及裝置

在審

• 申請號: 202110355580.6
• 申請日: 2021-04-01
• 公開（公告）號: CN112907364A
• 公開（公告）日: 2021-06-04
• 發明（設計）人: 王展昭;邱芳芳;譚領航;張晨
• 申請（專利權）人: 重慶度小滿優揚科技有限公司
• 主分類號: G06Q40/02
• 分類號: G06Q40/02;G06Q10/06
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 史翠

1.一種風控分析模型的評估方法，其特征在于，包括：

獲取所述實驗風控分析模型分析實驗樣本數據得到的實驗模型結果，并分析所述實驗模型結果得到實驗結果指標，其中，所述實驗風控分析模型由非實驗風控分析模型調整得到；

獲取所述非實驗風控分析模型分析所述參照樣本數據得到的參照模型結果，并分析所述參照模型結果得到參照結果指標；

針對任一所述實驗結果指標，基于T-test單獨立樣本公式，根據所述實驗結果指標的信息及參照結果指標的信息，計算得到所述實驗結果指標的置信度；

根據各個實驗結果指標對應的置信度確定所述實驗風控分析模型的分析結果的可信度。

2.根據權利要求1所述的方法，其特征在于，所述針對任一所述實驗結果指標，基于T-test單獨立樣本公式，根據所述實驗結果指標的信息及參照結果指標的信息，計算得到所述實驗結果指標的置信度，包括：

針對每個所述實驗結果指標，執行以下步驟：

確定所述實驗結果指標的類型，所述類型包括離散型指標或連續型指標；

當所述實驗結果指標為離散型指標時，根據所述實驗結果指標的數值及所述實驗樣本數據的數量，以及對應的所述非實驗結果指標的數值及所述非實參照樣本數據的數量，按照離散型指標對應的T-test單獨立樣本公式，計算得到所述實驗結果指標的置信度；

當所述實驗結果指標為連續型指標時，根據所述實驗結果指標的數值、所述數值平方和及所述實驗樣本數據的數量，以及，對應的所述非實驗結果指標的數值、數值平方和及所述參照樣本數據的數量，按照連續型指標對應的T-test單獨立樣本公式，計算得到所述實驗結果指標的置信度。

3.根據權利要求1所述的方法，其特征在于，所述根據各個實驗結果指標對應的置信度確定所述實驗風控分析模型的分析結果的可信度，包括：

當各個所述實驗結果指標的置信度均大于或等于第一閾值時，確定所述實驗風控分析模型的分析結果可信。

4.根據權利要求1所述的方法，其特征在于，所述方法還包括：

獲取各個所述實驗結果指標對應的指標給定值；

基于所述T-test單獨立樣本公式，反向推導計算得到使所述實驗風控分析模型的實驗結果指標達到相應的指標給定值所需的最小實驗樣本數量。

5.根據權利要求4所述的方法，其特征在于，所述基于所述T-test單獨立樣本公式，反向推導計算得到使所述實驗風控分析模型的實驗結果指標達到相應的指標給定值所需的最小實驗樣本數量，包括：

針對所述實驗風控分析模型的任一實驗結果指標，執行以下步驟：

根據所述實驗結果指標期望值、提升比例、接受正確假設的概率、拒絕錯誤假設的概率、樣本比例，利用基于T-test單獨立樣本公式得到的與所述實驗結果指標的類型相匹配的樣本數量計算公式，計算得到所述實驗結果指標的置信度大于或等于所述預設置信度所對應的最小實驗樣本數量。

6.一種風控分析模型的評估裝置，其特征在于，包括：

實驗結果獲取模塊，用于獲取所述實驗風控分析模型分析實驗樣本數據得到的實驗模型結果；

實驗指標獲取模塊，用于分析所述實驗模型結果得到實驗結果指標，其中，所述實驗風控分析模型由非實驗風控分析模型調整得到；

參照結果獲取模塊，用于獲取所述非實驗風控分析模型分析所述參照樣本數據得到的參照模型結果；

參照指標獲取模塊，用于分析所述參照模型結果得到參照結果指標；

指標置信度計算模塊，用于針對任一所述實驗結果指標，基于T-test單獨立樣本公式，根據所述實驗結果指標的信息及參照結果指標的信息，計算得到所述實驗結果指標的置信度；

實驗結果可信度確定模塊，用于根據各個實驗結果指標對應的置信度確定所述實驗風控分析模型的分析結果的可信度。