[發(fā)明專(zhuān)利]一種基于區(qū)塊鏈的熱數(shù)據(jù)融合方法

有效

• 申請(qǐng)?zhí)枺?/td>: 202110997259.8
• 申請(qǐng)日: 2021-08-27
• 公開(kāi)（公告）號(hào): CN113779623B
• 公開(kāi)（公告）日: 2023-08-08
• 發(fā)明（設(shè)計(jì)）人: 張金琳;俞學(xué)勱;高航
• 申請(qǐng)（專(zhuān)利權(quán)）人: 浙江數(shù)秦科技有限公司
• 主分類(lèi)號(hào): G06F21/62
• 分類(lèi)號(hào): G06F21/62;G06F16/22;G06F16/27
• 代理公司: 暫無(wú)信息
• 代理人: 暫無(wú)信息

1.一種基于區(qū)塊鏈的熱數(shù)據(jù)融合方法，其特征在于，

包括以下步驟：

數(shù)據(jù)源方為數(shù)據(jù)行分配行編號(hào)，提取數(shù)據(jù)行的字段結(jié)構(gòu)，生成數(shù)據(jù)行的外部主鍵字段標(biāo)識(shí)；

將字段結(jié)構(gòu)、外部主鍵字段標(biāo)識(shí)和行編號(hào)公開(kāi)；

建立替代數(shù)表，將非數(shù)值型字段轉(zhuǎn)換為數(shù)值型字段；

為數(shù)據(jù)行建立若干個(gè)副本，將字段取值拆分為若干個(gè)加數(shù)，若干個(gè)加數(shù)分配給若干個(gè)副本存儲(chǔ)；

數(shù)據(jù)源方建立保留節(jié)點(diǎn)，保留節(jié)點(diǎn)保留一個(gè)副本作為保留副本；

建立若干個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)，其余副本分配給若干個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)；

若數(shù)據(jù)行發(fā)生更新，所述保留節(jié)點(diǎn)計(jì)算變化量，將變化量疊加到保留副本中；

建立模型節(jié)點(diǎn)，接收數(shù)據(jù)需求方提交的數(shù)據(jù)處理模型，分配模型編號(hào)；

數(shù)據(jù)需求方根據(jù)外部主鍵字段標(biāo)識(shí)獲得匹配的行編號(hào)，將行編號(hào)提交給模型節(jié)點(diǎn)；

所述模型節(jié)點(diǎn)將行編號(hào)發(fā)送給保留節(jié)點(diǎn)，若干個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)和保留節(jié)點(diǎn)建立安全多方計(jì)算，獲得數(shù)據(jù)行輸入數(shù)據(jù)處理模型的模型結(jié)果；

將模型結(jié)果發(fā)送給數(shù)據(jù)需求方；

副本的字段組成構(gòu)成字段結(jié)構(gòu)，所述數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)為每個(gè)字段結(jié)構(gòu)開(kāi)辟存儲(chǔ)區(qū)，在存儲(chǔ)區(qū)內(nèi)開(kāi)辟若干個(gè)存儲(chǔ)塊，所述存儲(chǔ)塊大小與副本最大占用空間匹配，所述數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)將副本關(guān)聯(lián)行編號(hào)存儲(chǔ)在所述存儲(chǔ)塊內(nèi)，當(dāng)存儲(chǔ)區(qū)內(nèi)的存儲(chǔ)塊內(nèi)存滿時(shí)，所述數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)為副本的列結(jié)構(gòu)開(kāi)辟新的存儲(chǔ)區(qū)和存儲(chǔ)塊；

所述數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)為每個(gè)存儲(chǔ)區(qū)建立有交換表，所述交換表記錄若干個(gè)交換對(duì)，所述交換對(duì)記錄兩個(gè)二進(jìn)制序列；

將副本存入后，以二進(jìn)制形式檢查數(shù)據(jù)行與上一個(gè)存儲(chǔ)塊內(nèi)存儲(chǔ)的數(shù)據(jù)行是否存在對(duì)齊的交換對(duì)；

若存在，則將交換對(duì)所在的字段進(jìn)行交換；

建立安全多方計(jì)算時(shí)，所述數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)根據(jù)行編號(hào)找到存儲(chǔ)塊，向后檢查是否存在對(duì)齊的交換對(duì)；

若存在則以后一個(gè)存儲(chǔ)塊為基準(zhǔn)，再次向后檢查是否存在對(duì)齊的交換對(duì)，且僅檢查存在交換對(duì)的字段位置是否存在對(duì)齊的交換對(duì)；

直到找到檢查位置無(wú)對(duì)齊交換對(duì)或者到達(dá)存儲(chǔ)區(qū)最后一個(gè)存儲(chǔ)塊；

將被檢查出存在對(duì)齊交換對(duì)的全部存儲(chǔ)塊制作一個(gè)副本；

從最后一個(gè)存儲(chǔ)塊開(kāi)始，依次復(fù)原對(duì)齊交換對(duì)所在字段；

將行編號(hào)對(duì)應(yīng)的副本的上一個(gè)存儲(chǔ)塊的內(nèi)容添加到副本中；

以復(fù)原的副本中為準(zhǔn)，向上檢查與上一個(gè)存儲(chǔ)塊是否存在對(duì)齊的交換對(duì)；

若存在，則在副本中將對(duì)應(yīng)字段進(jìn)行交換，交換后即獲得副本，使用副本進(jìn)行安全多方計(jì)算；

所述保留節(jié)點(diǎn)構(gòu)建安全多方計(jì)算前，對(duì)數(shù)據(jù)處理模型執(zhí)行以下步驟：

提取數(shù)據(jù)處理模型中的加權(quán)求和計(jì)算式；

將加權(quán)求和計(jì)算式發(fā)送給若干個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)，數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)調(diào)取對(duì)應(yīng)的副本，將副本中保存的加數(shù)代入加權(quán)求和計(jì)算式，得出中間和，將中間和發(fā)送給所述保留節(jié)點(diǎn)；

所述保留節(jié)點(diǎn)將保留副本中保存的加數(shù)代入加權(quán)求和計(jì)算式，得出保留和，將保留和與數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)發(fā)送的全部中間和相加，即獲得真實(shí)值代入加權(quán)求和計(jì)算式的結(jié)果；

將加權(quán)求和計(jì)算式的結(jié)果代入數(shù)據(jù)處理模型，對(duì)非加權(quán)求和的計(jì)算式，構(gòu)建安全多方計(jì)算求解。

2.根據(jù)權(quán)利要求1所述的一種基于區(qū)塊鏈的熱數(shù)據(jù)融合方法，其特征在于，

所述保留節(jié)點(diǎn)計(jì)算數(shù)值型字段真實(shí)值和2次方至N次方的值，在副本中為每個(gè)數(shù)值型字段新建2次方至N次方列；

將數(shù)值型字段真實(shí)值的1次方至N次方值分別拆分成若干個(gè)加數(shù)，并分別分配給保留副本和其余副本存儲(chǔ)；

所述保留節(jié)點(diǎn)構(gòu)建安全多方計(jì)算前，對(duì)數(shù)據(jù)處理模型執(zhí)行以下步驟：

提取以真實(shí)值為輸入的能夠進(jìn)行泰勒展開(kāi)的一元計(jì)算式，將所述的一元計(jì)算式展開(kāi)為泰勒展開(kāi)式，泰勒展開(kāi)式為真實(shí)值的1次方至N次方值的加權(quán)和計(jì)算式；

將加權(quán)和計(jì)算式發(fā)送給若干個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)，數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)調(diào)取對(duì)應(yīng)的副本，將副本中保存的1次方至N次方加數(shù)代入加權(quán)和計(jì)算式，得出中間和，將中間和發(fā)送給所述保留節(jié)點(diǎn)；

所述保留節(jié)點(diǎn)將保留副本中保存的1次方至N次方加數(shù)代入加權(quán)和計(jì)算式，得出保留和，將保留和與數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)發(fā)送的全部中間和相加，即獲得真實(shí)值代入一元計(jì)算式的近似結(jié)果；

將一元計(jì)算式的近似結(jié)果代入數(shù)據(jù)處理模型，對(duì)非加權(quán)求和的計(jì)算式，構(gòu)建安全多方計(jì)算求解。