[發(fā)明專利]機(jī)器學(xué)習(xí)模型的訓(xùn)練方法、裝置、設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202111443214.2
• 申請日: 2021-11-30
• 公開（公告）號: CN114091689A
• 公開（公告）日: 2022-02-25
• 發(fā)明（設(shè)計）人: 黃安埠
• 申請（專利權(quán)）人: 深圳前海微眾銀行股份有限公司
• 主分類號: G06N20/00
• 分類號: G06N20/00
• 代理公司: 北京派特恩知識產(chǎn)權(quán)代理有限公司 11270
• 代理人: 趙翠萍;張穎玲

1.一種機(jī)器學(xué)習(xí)模型的訓(xùn)練方法，其特征在于，應(yīng)用于服務(wù)端設(shè)備，所述方法包括：

接收多個訓(xùn)練端設(shè)備分別發(fā)送的訓(xùn)練后的機(jī)器學(xué)習(xí)模型；其中，所述訓(xùn)練端設(shè)備是在所述服務(wù)端設(shè)備發(fā)送的機(jī)器學(xué)習(xí)模型的基礎(chǔ)上訓(xùn)練的；

確定每個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果，根據(jù)所述測試結(jié)果從多個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型中確定滿足近似條件的至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型；

對所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型進(jìn)行融合處理，得到融合后機(jī)器學(xué)習(xí)模型。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，

所述確定每個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果，包括：

基于測試樣本分別調(diào)用所述多個訓(xùn)練后的機(jī)器學(xué)習(xí)模型，得到每個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果；

所述根據(jù)所述測試結(jié)果從多個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型中確定滿足近似條件的至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型，包括：

從每個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果中，確定滿足所述近似條件的至少兩個測試結(jié)果；

將所述至少兩個測試結(jié)果對應(yīng)的訓(xùn)練后的機(jī)器學(xué)習(xí)模型，確定為滿足近似條件的至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述從每個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果中，確定滿足所述近似條件的至少兩個測試結(jié)果，包括：

針對任意一個所述訓(xùn)練端設(shè)備發(fā)送的所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型執(zhí)行以下處理：

確定所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果分別與每個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果之間的近似距離；

確定小于近似距離閾值的近似距離對應(yīng)的至少二個訓(xùn)練后的機(jī)器學(xué)習(xí)模型，并確定為滿足近似條件的至少兩個測試結(jié)果。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述確定小于近似距離閾值的近似距離對應(yīng)的至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型，包括：

將所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型分別與每個所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果之間的近似距離進(jìn)行升序排序，得到近似距離序列；

將所述近似距離序列中的近似距離，依次與所述近似距離閾值進(jìn)行比較處理；

當(dāng)所述排序后的近似距離序列中的近似距離大于所述近似距離閾值時，確定所述近似距離序列中曾經(jīng)與所述近似距離閾值進(jìn)行比較處理的至少兩個近似距離，將所述至少兩個近似距離對應(yīng)的訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果，確定為滿足近似條件的至少兩個測試結(jié)果。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型進(jìn)行融合處理，得到融合后機(jī)器學(xué)習(xí)模型，包括：

根據(jù)所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型的測試結(jié)果之間的近似距離，確定所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型的權(quán)重；其中，每一所述訓(xùn)練后的機(jī)器學(xué)習(xí)模型的權(quán)重與對應(yīng)的近似距離負(fù)相關(guān)；

基于所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型的權(quán)重，對所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型進(jìn)行加權(quán)平均處理，得到融合后機(jī)器學(xué)習(xí)模型。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，在對所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型進(jìn)行融合處理，得到融合后機(jī)器學(xué)習(xí)模型之前，所述方法還包括：

將滿足近似條件的所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型所對應(yīng)的訓(xùn)練端，與根據(jù)所述多個訓(xùn)練端設(shè)備上一次訓(xùn)練后的測試結(jié)果確定的滿足近似條件的至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型所對應(yīng)的訓(xùn)練端進(jìn)行比對；

當(dāng)比對處理結(jié)果一致時，將在所述多個訓(xùn)練端設(shè)備上一次訓(xùn)練后確定的融合后的機(jī)器學(xué)習(xí)模型，確定為在所述多個訓(xùn)練端設(shè)備當(dāng)前一次訓(xùn)練后確定的融合后機(jī)器學(xué)習(xí)模型；

當(dāng)所述比對處理結(jié)果不一致時，轉(zhuǎn)入執(zhí)行對所述至少兩個訓(xùn)練后的機(jī)器學(xué)習(xí)模型進(jìn)行融合處理的步驟。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述向所述多個訓(xùn)練端設(shè)備發(fā)送所述融合后機(jī)器學(xué)習(xí)模型之前，所述方法還包括：

當(dāng)所述比對處理結(jié)果一致時，向所述多個訓(xùn)練端設(shè)備發(fā)送收斂消息；其中，所述收斂消息用于表征所述融合后機(jī)器學(xué)習(xí)模型收斂；

當(dāng)所述比對處理結(jié)果不一致時，轉(zhuǎn)入執(zhí)行向所述多個訓(xùn)練端設(shè)備發(fā)送所述融合后機(jī)器學(xué)習(xí)模型的步驟。