[發(fā)明專(zhuān)利]基于區(qū)塊鏈技術(shù)的大數(shù)據(jù)共享并存證的方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202111133335.7
• 申請(qǐng)日: 2021-09-27
• 公開(kāi)（公告）號(hào): CN113886101A
• 公開(kāi)（公告）日: 2022-01-04
• 發(fā)明（設(shè)計(jì)）人: 胡金龍;羅曉春;廖彬;韓希賢;董守斌
• 申請(qǐng)（專(zhuān)利權(quán)）人: 華南理工大學(xué)
• 主分類(lèi)號(hào): G06F9/54
• 分類(lèi)號(hào): G06F9/54;G06F16/27;G06F16/2458;G06Q40/04;G06F21/60
• 代理公司: 廣州市華學(xué)知識(shí)產(chǎn)權(quán)代理有限公司 44245
• 代理人: 馮炳輝

本發(fā)明公開(kāi)了一種基于區(qū)塊鏈技術(shù)的大數(shù)據(jù)共享并存證的方法，包括：從外部數(shù)據(jù)源收集大數(shù)據(jù)；對(duì)收集的大數(shù)據(jù)信息，進(jìn)行實(shí)時(shí)在線分析，檢測(cè)信息的共享需求和存證需求；對(duì)需要共享的數(shù)據(jù)，添加信息及描述；根據(jù)需要共享的數(shù)據(jù)的實(shí)時(shí)性需求進(jìn)行數(shù)據(jù)分發(fā)；對(duì)需要存證上傳的原始數(shù)據(jù)添加相關(guān)信息及描述，將數(shù)據(jù)存入分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)，并進(jìn)行區(qū)塊鏈存證；對(duì)需要存證校驗(yàn)的原始數(shù)據(jù)查詢存證信息，下載存證數(shù)據(jù)并進(jìn)行對(duì)比。本發(fā)明對(duì)共享的大數(shù)據(jù)進(jìn)行訂閱分發(fā)、分布式存儲(chǔ)和基于區(qū)塊鏈的存證，提供高效的、不可篡改的數(shù)據(jù)共享。

技術(shù)領(lǐng)域

本發(fā)明涉及大數(shù)據(jù)共享的技術(shù)領(lǐng)域，尤其是指一種基于區(qū)塊鏈技術(shù)的大數(shù)據(jù)共享并存證的方法。

背景技術(shù)

隨著社交網(wǎng)絡(luò)、工業(yè)互聯(lián)網(wǎng)和物聯(lián)網(wǎng)的快速發(fā)展，越來(lái)越多的數(shù)據(jù)被快速地產(chǎn)生，這對(duì)大數(shù)據(jù)共享系統(tǒng)帶來(lái)了諸多挑戰(zhàn)，例如共享的數(shù)據(jù)對(duì)實(shí)時(shí)性的要求不一，共享的數(shù)據(jù)規(guī)模越來(lái)越大，共享的數(shù)據(jù)面臨越來(lái)越多的被偽造和篡改等數(shù)據(jù)安全風(fēng)險(xiǎn)。

區(qū)塊鏈?zhǔn)且粋€(gè)分布式的共享賬本和數(shù)據(jù)庫(kù)，具有去中心化、不可篡改、公開(kāi)透明等特點(diǎn)。星際文件系統(tǒng)(IPFS)，是一個(gè)旨在創(chuàng)建持久且分布式存儲(chǔ)和共享文件的網(wǎng)絡(luò)傳輸協(xié)議。在IPFS網(wǎng)絡(luò)中的節(jié)點(diǎn)構(gòu)成一個(gè)分布式文件系統(tǒng)。

發(fā)明內(nèi)容

本發(fā)明的目的在于克服現(xiàn)有技術(shù)的缺點(diǎn)與不足，提出了一種基于區(qū)塊鏈技術(shù)的大數(shù)據(jù)共享并存證的方法，實(shí)現(xiàn)大數(shù)據(jù)共享及存證，對(duì)共享的大數(shù)據(jù)進(jìn)行訂閱分發(fā)、分布式存儲(chǔ)和基于區(qū)塊鏈的存證，提供高效的、不可篡改的數(shù)據(jù)共享。

為實(shí)現(xiàn)上述目的，本發(fā)明所提供的技術(shù)方案為：基于區(qū)塊鏈技術(shù)的大數(shù)據(jù)共享并存證的方法，包括以下步驟：

1)從外部數(shù)據(jù)源收集大數(shù)據(jù)，包括多媒體數(shù)據(jù)和序列數(shù)據(jù)；

2)對(duì)收集的大數(shù)據(jù)信息，進(jìn)行實(shí)時(shí)在線分析，檢測(cè)信息的共享需求，若有需求，則拷貝數(shù)據(jù)到共享通道，否則不用拷貝數(shù)據(jù)；檢測(cè)信息的存證需求，若有需求，則拷貝數(shù)據(jù)到存證通道，否則不用拷貝數(shù)據(jù)；

3)對(duì)需要共享的數(shù)據(jù)，添加信息及描述，其中，信息及描述包括：數(shù)據(jù)描述、數(shù)據(jù)實(shí)時(shí)性和數(shù)據(jù)所屬話題；對(duì)需要共享的數(shù)據(jù)，判斷數(shù)據(jù)的實(shí)時(shí)性需求，若是實(shí)時(shí)性需求數(shù)據(jù)，則進(jìn)入實(shí)時(shí)分發(fā)通道，進(jìn)行實(shí)時(shí)數(shù)據(jù)分發(fā)；否則進(jìn)入非實(shí)時(shí)分發(fā)通道，進(jìn)行非實(shí)時(shí)數(shù)據(jù)分發(fā)；

4)對(duì)需要存證上傳的原始數(shù)據(jù)添加相關(guān)信息及描述，并對(duì)原始數(shù)據(jù)生成摘要數(shù)據(jù)，將原始數(shù)據(jù)存入分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)；對(duì)摘要數(shù)據(jù)生成智能合約，進(jìn)行區(qū)塊鏈存證；將原始數(shù)據(jù)在分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)的位置信息和智能合約信息，傳給實(shí)時(shí)分發(fā)通道或非實(shí)時(shí)分發(fā)通道，進(jìn)行相應(yīng)數(shù)據(jù)分發(fā)；其中，分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)為IPFS分布式存儲(chǔ)系統(tǒng)；區(qū)塊鏈存證為基于分布式共享賬本(Hyperledger?Fabric)的數(shù)據(jù)存證；

5)對(duì)需要存證校驗(yàn)的原始數(shù)據(jù)生成數(shù)字摘要1，使用數(shù)字摘要1在區(qū)塊鏈中查詢存證信息，如果查詢到存證信息，則用該數(shù)字摘要1構(gòu)建原始數(shù)據(jù)的存儲(chǔ)地址，根據(jù)存儲(chǔ)地址下載存證數(shù)據(jù)，并對(duì)下載的數(shù)據(jù)再次生成數(shù)字摘要2，將數(shù)字摘要1和數(shù)字摘要2進(jìn)行對(duì)比校驗(yàn)，對(duì)比是否一致，如果一致則校驗(yàn)成功，并將存證信息進(jìn)行相應(yīng)的數(shù)據(jù)分發(fā)，若對(duì)比不一致，則校驗(yàn)失敗。

進(jìn)一步，在步驟1)中，所述多媒體數(shù)據(jù)包含視頻、圖像和聲音。

進(jìn)一步，在步驟3)中，根據(jù)信息及描述中的數(shù)據(jù)實(shí)時(shí)性判斷數(shù)據(jù)的實(shí)時(shí)性；根據(jù)數(shù)據(jù)的實(shí)時(shí)性選擇合適的分發(fā)通道，有實(shí)時(shí)分發(fā)通道和非實(shí)時(shí)分發(fā)通道，實(shí)時(shí)分發(fā)通道為基于消息隊(duì)列遙測(cè)傳輸協(xié)議(MQTT)的實(shí)時(shí)訂閱發(fā)布，非實(shí)時(shí)分發(fā)通道為基于IPFS的訂閱發(fā)布；檢測(cè)是否存在訂閱者訂閱該信息所屬話題，若存在，向匹配的訂閱者轉(zhuǎn)發(fā)該消息。

進(jìn)一步，所述步驟4)包括以下步驟：

4.1)對(duì)需要存證的數(shù)據(jù)添加相關(guān)信息及描述，信息及描述包括內(nèi)容：數(shù)據(jù)名稱(chēng)、數(shù)據(jù)類(lèi)型、數(shù)據(jù)歸屬者、數(shù)據(jù)描述、數(shù)據(jù)實(shí)時(shí)性、數(shù)據(jù)所屬話題和數(shù)據(jù)共享時(shí)間戳，其中數(shù)據(jù)共享時(shí)間戳自動(dòng)生成；