[發明專利]實現隱私保護的多方協同更新模型的方法、裝置及系統

有效

• 申請號: 202110320900.4
• 申請日: 2021-03-25
• 公開（公告）號: CN112948885B
• 公開（公告）日: 2023-10-27
• 發明（設計）人: 呂靈娟;王維強;漆遠
• 申請（專利權）人: 支付寶（杭州）信息技術有限公司
• 主分類號: G06F21/62
• 分類號: G06F21/62;G06N20/00
• 代理公司: 北京億騰知識產權代理事務所(普通合伙) 11309
• 代理人: 陳霽;周良玉

1.一種實現隱私保護的多方協同更新模型的方法，所述多方包括服務器和n個參與方；所述方法包括多輪迭代，其中任意的第t輪迭代包括：

所述服務器向每個參與方i下發第t輪公共樣本的聚合結果；其中，所述聚合結果，是所述服務器對所述n個參與方基于各自本地的模型針對所述第t輪公共樣本輸出的n份第一預測結果進行聚合得到；

每個參與方i根據所述第t輪公共樣本和所述聚合結果，對其本地的第i模型進行第一更新；

每個參與方i基于本地樣本集中固定的第一私有樣本及其樣本標簽，對第一更新后的第i模型進行第二更新；

每個參與方i將用于下一輪迭代的第t+1輪公共樣本，輸入第二更新后的第i模型，并將輸出的第二預測結果發送給所述服務器；

所述服務器聚合所述n個參與方發送的n份第二預測結果，以用于下一輪迭代；

在所述多輪迭代后，每個參與方i將其第二更新后的第i模型，作為其與其它參與方協同更新的模型。

2.根據權利要求1所述的方法，所述服務器中維護有公共樣本集；

在所述每個參與方i將用于下一輪迭代的第t+1輪公共樣本，輸入第二更新后的第i模型之前，所述方法還包括：

所述服務器從其維護的公共樣本集中隨機選取若干公共樣本作為第t+1輪公共樣本，并將其發送給每個參與方i，或者；

所述服務器從其維護的公共樣本集中隨機選取若干公共樣本作為第t+1輪公共樣本，并將所述第t+1輪公共樣本的指示發送給每個參與方i；

每個參與方i根據所述指示，從所述服務器獲取所述第t+1輪公共樣本。

3.根據權利要求1所述的方法，第三方中維護有公共樣本集，所述服務器中維護有所述公共樣本集中各公共樣本的描述信息；

在所述每個參與方i將用于下一輪迭代的第t+1輪公共樣本，輸入第二更新后的第i模型之前，所述方法還包括：

所述服務器隨機選取若干公共樣本的描述信息作為所述第t+1輪公共樣本的描述信息，并將其下發至每個參與方i；

每個參與方i根據所述描述信息，從第三方獲取所述第t+1輪公共樣本。

4.根據權利要求1所述的方法，

任意的參與方i本地樣本集中的樣本為圖片，其與其它參與方協同更新的模型為圖片識別模型；或者，

任意的參與方i本地樣本集中的樣本為音頻，其與其它參與方協同更新的模型為音頻識別模型；或者，

任意的參與方i本地樣本集中的樣本為文本，其與其它參與方協同更新的模型為文本識別模型。

5.根據權利要求1所述的方法，所述n個參與方各自本地的模型的網絡結構不同。

6.根據權利要求1所述的方法，所述服務器聚合所述n個參與方發送的n份第二預測結果，包括：

所述服務器對所述n份第二預測結果進行求和、加權求和或者求加權平均。

7.一種實現隱私保護的多方協同更新模型的方法，所述多方包括服務器和n個參與方；所述方法通過所述n個參與方中任意的參與方i執行；所述方法包括多輪迭代，其中任意的第t輪迭代包括：

接收所述服務器下發的第t輪公共樣本的聚合結果；其中，所述聚合結果，是所述服務器對所述n個參與方基于各自本地的模型針對所述第t輪公共樣本輸出的n份第一預測結果進行聚合得到；

根據所述第t輪公共樣本和所述聚合結果，對其本地的第i模型進行第一更新；

基于本地樣本集中固定的第一私有樣本及其樣本標簽，對第一更新后的第i模型進行第二更新；

將用于下一輪迭代的第t+1輪公共樣本，輸入第二更新后的第i模型，并將輸出的第二預測結果發送給所述服務器，以供所述服務器聚合所述第二預測結果以及其它參與方發送的其它預測結果，以用于下一輪迭代；

在所述多輪迭代后，將其第二更新后的第i模型，作為其與其它參與方協同更新的模型。

8.根據權利要求7所述的方法，所述第i模型通過以下步驟獲得：

接收所述服務器下發的初始模型；

基于本地樣本集中固定的第一私有樣本及其樣本標簽，更新所述初始模型，得到所述第i模型。