[發明專利]三方數據源的測試評估系統及方法

在審

• 申請號: 202010761044.1
• 申請日: 2020-07-31
• 公開（公告）號: CN111861734A
• 公開（公告）日: 2020-10-30
• 發明（設計）人: 劉瓊
• 申請（專利權）人: 重慶富民銀行股份有限公司
• 主分類號: G06Q40/02
• 分類號: G06Q40/02
• 代理公司: 重慶強大凱創專利代理事務所(普通合伙) 50217
• 代理人: 蒙捷

1.三方數據源的測試評估系統，其特征在于：包括數據獲取模塊、處理模塊、驗證模塊、統計模塊和測試模塊；

數據獲取模塊，用于根據指定目標獲取數據供應商的測試數據；

處理模塊，用于從數據獲取模塊接收測試數據進行預處理，所述處理模塊將預處理后的測試數據發送至統計模塊；

統計模塊，用于計算預處理后的測試數據的查得率并向處理模塊反饋，所述處理模塊將統計后的測試數據和對應的查得率發送至驗證模塊；

驗證模塊，用于對統計后測試數據進行真實性驗證并向處理模塊反饋驗證結果，所述驗證結果包括正結果和負結果，所述處理模塊在驗證結果為正結果時將驗證后的測試數據發送至測試模塊，所述處理模塊在驗證結果為負結果是丟棄測試數據并向數據獲取模塊發送重新獲取信號；

測試模塊，用于計算驗證后的測試數據的IV值，以IV值來計算預處理后的測試數據的區分度，所述測試模塊對測試數據的資質信息進行核查并向處理模塊反饋核查結果，所述處理模塊根據核查結果得到測試結果。

2.根據權利要求1所述的三方數據源的測試評估系統，其特征在于：所述處理模塊判斷所接收的測試數據的數據類型發送至驗證模塊，所述數據類型包括驗證類數據和特征類數據，所述處理模塊在數據類型為特征類數據時給測試數據添加時間點進行預處理。

3.根據權利要求2所述的三方數據源的測試評估系統，其特征在于：在數據類型為特征類數據時，所述驗證模塊對先后時間點獲得的測試數據是否相同進行反饋，所述驗證模塊在先后時間點獲得的測試數據相同時反饋負結果，所述驗證模塊在先后時間點獲得的測試數據不相同時反饋正結果，在數據類型為驗證類數據時，所述驗證模塊對測試數據之間的匹配性進行驗證反饋，所述驗證模塊在測試數據之間匹配時反饋正結果，所述驗證模塊在測試數據之間不匹配時反饋負結果。

4.根據權利要求3所述的三方數據源的測試評估系統，其特征在于：在數據類型為驗證類數據時，所述處理模塊獲取直接真實數據或類似真實數據發送至測試模塊，所述測試模塊收到直接真實數據時以直接真實數據和測試數據計算混淆矩陣，所述類似真實數據為與數據供應商同類型廠商的測試數據，所述測試模塊根據測試數據與類似真實數據間組合計算混淆矩陣，所述測試模塊根據混淆矩陣計算出測試數據的準確率。

5.根據權利要求4所述的三方數據源的測試評估系統，其特征在于：所述查得率的計算公式為：查得率＝查得數據記錄數/測試數據記錄數，所述處理模塊在查得率小于閾值時判斷驗證后的三方數是否為黑名單數據，當驗證后的測試數據為黑名單數據時，所述處理模塊向測試模塊發送單獨計算信號，所述測試模塊計算黑名單數據的覆蓋率、誤拒率、有效差異率和無效差異率，所述處理模塊獲取覆蓋率、誤拒率、有效差異率和無效差異率判斷測試數據的信用度。

6.根據權利要求5所述的三方數據源的測試評估系統，其特征在于：所述覆蓋率的計算公式為：覆蓋率＝查得命中黑名單數/樣本數量，所述誤拒率的計算公式為：誤拒率＝查得命中黑名單數/樣本中通過且為好客戶數量，所述有效差異率的計算公式為：有效差異率＝查得命中黑名單數/樣本中通過且壞客戶量，所述無效差異率的計算公式為：無效差異率＝查得命中黑名單數/樣本中其他拒絕量。

7.根據權利要求5所述的三方數據源的測試評估系統，其特征在于：所述處理模塊在覆蓋率大于閾值時初步判斷測試數據對應客戶為低質量客戶。

8.根據權利要求7所述的三方數據源的測試評估系統，其特征在于：在無效差異率位于預設范圍內時，所述處理模塊判斷誤拒率小于誤拒閾值且有效差異率大于差異閾值時的客戶為高質量客戶。

9.根據權利要求1所述的三方數據源的測試評估系統，其特征在于：所述測試模塊對預處理后的測試數據客戶的經營牌照類別、成立年限、安全證書和數據來源授權進行核查。

10.使用權利要求1至9任一項所述三方數據源的測試評估系統的三方數據源的測試評估方法。