[發明專利]一種分布式數據處理方法及系統

在審

• 申請號: 202110183631.1
• 申請日: 2021-02-08
• 公開（公告）號: CN112966279A
• 公開（公告）日: 2021-06-15
• 發明（設計）人: 王森;聶二保
• 申請（專利權）人: 北京金山云網絡技術有限公司
• 主分類號: G06F21/60
• 分類號: G06F21/60;G06F21/71
• 代理公司: 北京華夏泰和知識產權代理有限公司 11662
• 代理人: 張麗穎;沈園園

1.一種分布式數據處理方法，其特征在于，包括：

獲取用于進行計算的待處理信息，所述待處理信息中包括至少兩個變量信息；

獲取來自于算法處理服務器的運算流程中各運算步驟對應的運算數據，所述運算數據包括：所述運算步驟對應的運算法則、執行所述運算步驟的第一運算節點的第一節點標識以及用于接收所述運算步驟運算結果的第二運算節點的第二節點標識；

根據所述運算數據及所述變量信息生成各第一運算節點對應的運算控制信息；

根據所述第一節點標識將所述運算控制信息發送到所述第一運算節點；以使所述第一運算節點根據所述運算控制信息計算得到所述運算結果，并將所述運算結果根據所述第二節點標識發送至所述第二運算節點；

獲取最終運算節點計算得到最終結果；其中，所述最終運算節點為所述運算流程中的最后一個運算節點。

2.根據權利要求1所述的方法，其特征在于：所述根據所述運算數據及所述變量信息生成各第一運算節點對應的運算控制信息，包括：

查詢得到所述變量信息對應的算法序列，并根據所述變量信息以及對應的算法序列生成運算單元；

確定各個所述運算單元對應的所述運算數據；

根據所述運算數據及所述運算單元生成各第一運算節點對應的運算控制信息。

3.根據權利要求1所述的方法，其特征在于，所述根據所述第一節點標識將所述運算控制信息發送到所述第一運算節點，包括：

將所述運算控制信息按照預設的加密策略進行加密，得到加密信息；

將所述加密信息發送到所述第一運算節點，以使所述第一運算節點按照與所述加密策略對應的解密策略對所述加密信息進行解密，得到所述運算控制信息。

4.一種模型分割的數據處理方法，其特征在于，包括：

對目標模型進行分割，確定依次分割對應的運算法則以及分割得到的邏輯單元；

根據分割得到最小邏輯單元對應的所有所述運算法則，得到與所述最小邏輯單元對應的算法序列；

根據所述目標模型確定每個所述最小邏輯單元之間的邏輯關系信息；

根據所述算法序列、所述邏輯關系信息以及所述最小邏輯單元得到分割后子模型；

根據所述分割后子模型確定運算流程，以及所述運算流程中各運算步驟對應的運算數據，并將所述運算數據發送到分發平臺，所述運算數據包括：所述運算步驟對應的運算法則、執行所述運算步驟的第一運算節點的第一節點標識以及用于接收所述運算步驟運算結果的第二運算節點的第二節點標識。

5.根據權利要求4所述的方法，其特征在于，所述根據分割得到最小邏輯單元對應的所有所述運算法則，得到與所述最小邏輯單元對應的算法序列，包括：

確定由所述目標模型分割得到所述最小邏輯單元依次依據的運算法則；

將每個所述最小邏輯單元對應的所述運算法則按分割的順序排列，得到與每個所述最小邏輯單元對應的所述算法序列。

6.根據權利要求4所述的方法，其特征在于，所述根據所述算法序列、所述邏輯關系信息以及所述最小邏輯單元得到分割后子模型，包括：

根據每個所述最小邏輯單元的算法序列，確定每個所述最小邏輯單元的層級信息；

按照所述邏輯關系信息以及所述層級信息逐層確定每個所述最小邏輯單元的計算序號；

根據每個所述運算法則對應的堿基，得到與所述算法序列對應的堿基密碼；其中，所述堿基包括至少一個字符；

根據每個所述最小邏輯單元的計算序號、堿基密碼以及所述最小邏輯單元得到所述分割后子模型。