[發明專利]基于聯邦學習實現數據集構建處理的系統及其生成方法

在審

• 申請號: 202110833141.1
• 申請日: 2021-07-22
• 公開（公告）號: CN113486378A
• 公開（公告）日: 2021-10-08
• 發明（設計）人: 顧冉;葉薇薇
• 申請（專利權）人: 杭州煋辰數智科技有限公司
• 主分類號: G06F21/60
• 分類號: G06F21/60;G06F21/64;G06F11/14;G06F11/32
• 代理公司: 成都頂峰專利事務所(普通合伙) 51224
• 代理人: 李崧巖

本發明公開了基于聯邦學習實現數據集構建處理的系統及其生成方法，所述的基于聯邦學習實現數據集構建處理的系統包括數據集管理單元、數據集分析單元、數據集加密單元和數據集匯總單元；所述數據集管理單元用于對數據接收后上傳；所述數據集分析單元用于對數據分析；本發明的有益效果是：基于聯邦學習實現數據集構建處理的系統及其生成方法，提高了數據集的訪問過程的安全性，簡化了對數據集加密過程的步驟和解密過程的步驟，縮短了訪問時間，提升了用戶的使用體驗。

技術領域

本發明涉及數據處理技術領域，具體為基于聯邦學習實現數據集構建處理的系統及其生成方法。

背景技術

聯邦學習(FederatedLearning)是一種新興的人工智能基礎技術，在2016年由谷歌最先提出,其設計目標是在保障大數據交換時的信息安全、保護終端數據和個人數據隱私、保證合法合規的前提下，在多參與方或多計算結點之間開展高效率的機器學習。聯邦學習在訓練和模型評估階段都需要大量的數據集，但是實際使用過程中數據集的的安全風險過大，對數據集的加密和解密過程過為繁瑣，浪費大量時間。

發明內容

本發明的目的在于提供基于聯邦學習實現數據集構建處理的系統及其生成方法，以解決上述背景技術中提出的問題。

為實現上述目的，本發明提供如下技術方案：基于聯邦學習實現數據集構建處理的系統，包括數據集管理單元、數據集分析單元、數據集加密單元和數據集匯總單元；

所述數據集管理單元用于對數據接收后上傳；

所述數據集分析單元用于對數據分析；

所述數據集加密單元用于對數據進行加密；

所述數據集匯總單元用于對數據進行儲存。

優選的，所述數據集管理單元包括數據讀取模塊、數據采集模塊和數據上傳模塊；

所述數據讀取模塊可對歷史數據讀??；

所述數據采集模塊用于對新采集的數據收集；

所述數據上傳模塊用于對歷史數據和新采集的數據上傳。

優選的，所述數據集分析單元包括數據接收模塊和數據分類模塊；

所述數據接收模塊用于對數據接收；

所述數據分類模塊用于對數據分類處理。

優選的，所述數據集加密單元包括數據加密模塊、數據校驗模塊、秘匙管理模塊和數據解密模塊；

所述數據加密模塊用于對數據加密；

所述數據校驗用于對用戶身份驗證；

所述秘匙管理模塊用于對密匙令牌發放；

所述數據解密模塊用于對加密后的數據解密。

優選的，所述數據集匯總單元包括數據儲存模塊、數據備份模塊和數據監控模塊，所述數據儲存模塊與數據備份模塊雙向電連接；

所述數據監控模塊用于對儲存的數據監控和異常報警。

優選的，所述數據采集模塊通過數據傳輸鏈向數據服務器傳輸數據，所述數據采集模塊的輸入端與生產設備的輸出端連接，所述數據采集模塊的輸出端電連接有RS232串口。

優選的，所述數據集管理單元、數據集分析單元、數據集加密單元和數據集匯總單元均與數據集處理系統電連接。

本發明還提供基于聯邦學習實現數據集構建處理的生成方法，包括以下步驟：

S1、通過數據集管理單元讀取歷史數據、獲取新數據，對數據上傳；