[發明專利]一種模型效果檢測方法、裝置、存儲介質及設備

有效

• 申請號: 202210958348.6
• 申請日: 2022-08-11
• 公開（公告）號: CN115037442B
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 周輝
• 申請（專利權）人: 平安銀行股份有限公司
• 主分類號: H04L9/00
• 分類號: H04L9/00;H04L9/40
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 余菲

1.一種模型效果檢測方法，其特征在于，應用于數據源方，包括：

基于半同態加密算法生成公鑰及私鑰，并將所述公鑰發送給模型方，以使所述模型方利用所述公鑰對預測值隊列進行加密以得到第一密文，所述預測值隊列是由所述模型方針對一組測試數據計算得到的模型預測結果組成的隊列；

利用所述公鑰對標注值隊列進行加密以得到第二密文，并將所述第二密文發送給所述模型方，以使所述模型方對所述第一密文和所述第二密文進行同態減運算，得到第三密文；所述第三密文是基于將同態減運算的結果進行亂序處理而得到的；

獲取所述模型方發送的第三密文，并利用所述私鑰對所述第三密文進行解密，根據解密結果確定所述模型方的模型效果；

其中，所述標注值隊列是所述數據源方針對所述測試數據計算得到的模型預測結果組成的隊列；所述根據解密結果確定所述模型方的模型效果包括：根據解密得到的明文中0的占比率，確定所述模型方的模型效果和所述數據源方的模型效果之間的匹配度；

或者，所述標注值隊列是所述測試數據對應的真實結果組成的隊列；所述根據解密結果確定所述模型方的模型效果包括：根據解密得到的明文中0的占比率，確定所述模型方的模型預測結果的準確率。

2.根據權利要求1所述的方法，其特征在于，若所述標注值隊列是所述測試數據對應的真實結果組成的隊列，所述方法還包括：

根據所述測試數據對應的真實結果與所述數據源方針對所述測試數據計算得到的模型預測結果之間的匹配度，確定所述數據源方的模型預測結果的準確率；

根據所述模型方的模型預測結果的準確率和所述數據源方的模型預測結果的準確率之間的大小關系，比較所述模型方的模型效果和所述數據源方的模型效果。

3.根據權利要求1所述的方法，其特征在于，所述模型方對所述第一密文和所述第二密文進行同態減運算的過程中，隨機地采取第一密文減去第二密文，或第二密文減去第一密文的形式，其中，采取第一密文減去第二密文的形式的概率為二分之一。

4.一種模型效果檢測裝置，其特征在于，包括：

生成模塊，用于基于半同態加密算法生成公鑰及私鑰，并將所述公鑰發送給模型方，以使所述模型方利用所述公鑰對預測值隊列進行加密以得到第一密文，所述預測值隊列是由所述模型方針對一組測試數據計算得到的模型預測結果組成的隊列；

加密模塊，用于利用所述公鑰對標注值隊列進行加密以得到第二密文，并將所述第二密文發送給所述模型方，以使所述模型方對所述第一密文和所述第二密文進行同態減運算，得到第三密文；所述第三密文是基于將同態減運算的結果進行亂序處理而得到的；

解密模塊，用于獲取所述模型方發送的第三密文，并利用所述私鑰對所述第三密文進行解密，根據解密結果確定所述模型方的模型效果；

其中，所述標注值隊列是數據源方針對所述測試數據計算得到的模型預測結果組成的隊列；所述解密模塊具體用于：根據解密得到的明文中0的占比率，確定所述模型方的模型效果和所述數據源方的模型效果之間的匹配度；

或者，所述標注值隊列是所述測試數據對應的真實結果組成的隊列；所述解密模塊具體用于：根據解密得到的明文中0的占比率，確定所述模型方的模型預測結果的準確率。

5.一種計算機可讀存儲介質，其特征在于，其上存儲有計算機程序，所述計算機程序被處理器執行時實現如權利要求1至3任一項所述的方法。

6.一種計算機設備，其特征在于，包括處理器、存儲器及存儲在存儲器上并可在處理器上運行的計算機程序，其中，所述處理器執行所述計算機程序時實現如權利要求1至3任一項所述的方法。