[發明專利]一種基于區塊鏈的熱數據融合方法

有效

• 申請號: 202110997259.8
• 申請日: 2021-08-27
• 公開（公告）號: CN113779623B
• 公開（公告）日: 2023-08-08
• 發明（設計）人: 張金琳;俞學勱;高航
• 申請（專利權）人: 浙江數秦科技有限公司
• 主分類號: G06F21/62
• 分類號: G06F21/62;G06F16/22;G06F16/27
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明涉及區塊鏈技術領域，具體涉及一種基于區塊鏈的熱數據融合方法，包括以下步驟：數據源方為數據行分配行編號；將字段結構、外部主鍵字段標識和行編號公開；建立替代數表；為數據行建立若干個副本，將字段取值拆分為若干個加數；數據源方建立保留節點；建立若干個數據存儲節點；將變化量疊加到保留副本中；建立模型節點，分配模型編號；數據需求方將行編號提交給模型節點；模型節點將行編號發送給保留節點，若干個數據存儲節點和保留節點建立安全多方計算，獲得數據行輸入數據處理模型的模型結果；將模型結果發送給數據需求方。本發明的實質性效果是：實現熱數據的融合，解決數據異構問題，保護了數據的隱私性。

技術領域

本發明涉及區塊鏈技術領域，具體涉及一種基于區塊鏈的熱數據融合方法。

背景技術

隨著信息技術的發展，以智能制造、人工智能為代表的新技術正開啟全新變革，引領全球經濟發展。而無論是智能制造還是人工智能都離不開數據分析，大數據時代已經到來。人工智能的核心是數據，離開數據的支撐人工智能將難以實現復雜的功能。然而，目前人工智能需要的數據分散在不同的企業和部門系統中。出于隱私保護需要、競爭關系等等原因，導致目前的數據難以進行分享和融合，形成了一個個的數據孤島。這嚴重限制了人工智能技術的發展。因而有必要研制一種數據分享的機制，在確保數據隱私的前提下，實現數據的分享和流通。促進人工智能技術的發展。熱數據指存在于用戶系統中，業務尚未完結或者可能存在更新，需要被訪問和更新的數據。而冷數據指已完成的業務存檔數據，無更新需求。冷數據通常適合離線的分析，比如機器學習中的模型訓練或者大數據分析。但機器學習訓練完成后，則需要最新的業務數據代入，才能知道業務的開展。然而出于系統安全、數據隱私等因素，目前熱數據的分享和融合還缺乏能夠滿足需求的方案。

如中國專利CN111010430A，公開日2020年4月14日，一種基于雙鏈結構的云計算安全數據共享方法，包括以下步驟：采用私有區塊鏈加公有區塊鏈的聯合查詢架構，應用區塊鏈和數據加密技術對云平臺數據進行保護，通過加密體系保證數據的所有權都控制在數據擁有方，并通過區塊鏈智能合約在業務處理時只返回業務結果，在數據分享時，數據請求方通過檢索公有區塊鏈數據得到數據提供方的原數據，數據擁有方根據授權證書向請求方提交數據。其技術方案采用雙鏈結構，通過加密體系保證數據真實不可篡改，有效的保障業務處理時平臺數據的隱私性和安全性。但其技術方案不適合多個數據源之間分享融合數據的需求。

發明內容

本發明要解決的技術問題是：目前缺乏確保數據隱私的熱數據共享的技術方案的問題。提出了一種基于區塊鏈的熱數據融合方法，能夠在保護數據隱私的情況下，提供數據的融合和共享。

為解決上述技術問題，本發明所采取的技術方案為：一種基于區塊鏈的熱數據融合方法，包括以下步驟：數據源方為數據行分配行編號，提取數據行的字段結構，生成數據行的外部主鍵字段標識；將字段結構、外部主鍵字段標識和行編號公開；建立替代數表，將非數值型字段轉換為數值型字段；為數據行建立若干個副本，將字段取值拆分為若干個加數，若干個加數分配給若干個副本存儲；數據源方建立保留節點，保留節點保留一個副本作為保留副本；建立若干個數據存儲節點，其余副本分配給若干個數據存儲節點；若數據行發生更新，所述保留節點計算變化量，將變化量疊加到保留副本中；建立模型節點，接收數據需求方提交的數據處理模型，分配模型編號；數據需求方根據外部主鍵字段標識獲得匹配的行編號，將行編號提交給模型節點；所述模型節點將行編號發送給保留節點，若干個數據存儲節點和保留節點建立安全多方計算，獲得數據行輸入數據處理模型的模型結果；將模型結果發送給數據需求方。

作為優選，副本的字段組成構成字段結構，所述數據存儲節點為每個字段結構開辟存儲區，在存儲區內開辟若干個存儲塊，所述存儲塊大小與副本最大占用空間匹配，所述存儲節點將副本關聯行編號存儲在所述存儲塊內，當存儲區內的存儲塊內存滿時，所述數據存儲節點為副本的列結構開辟新的存儲區和存儲塊。