[發明專利]基于區塊鏈的數據處理方法及裝置、存儲介質及電子設備

在審

• 申請號: 202210630601.5
• 申請日: 2022-06-06
• 公開（公告）號: CN114969008A
• 公開（公告）日: 2022-08-30
• 發明（設計）人: 胡瑋
• 申請（專利權）人: 中國銀行股份有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/27;G06N3/04;G06N3/08;G06Q40/02
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 郄晨芳

本發明提供了一種基于區塊鏈的數據處理方法及裝置、存儲介質及電子設備，可應用于金融領域或其他領域，該方法包括：獲取數據清洗任務；數據清洗任務包括待清洗數據以及清洗目標；將數據清洗任務發往區塊鏈系統中的各個任務處理節點；接收每個任務處理節點的基于數據清洗任務反饋的任務處理數據；利用待清洗數據的參考補全信息對每個任務處理節點的任務處理數據進行核驗；參考補全信息通過預先構建的神經網絡模型基于待清洗數據中的異常數據項以及每個任務處理節點對應的用戶信息預測得到；對于每個任務處理數據，在該任務處理數據的核驗通過的情況下，對該任務處理數據進行存儲。能夠提高數據清洗效率，節約計算資源。

技術領域

本發明涉及數據處理技術領域，特別涉及一種基于區塊鏈的數據處理方法及裝置、存儲介質及電子設備。

背景技術

現今計算機技術發展迅速，尤其隨著互聯網應用場景的不斷壯大以及存儲技術的不斷突破，使得這些應用場景積累了海量的數據。為了對數據進行數據挖掘，分析數據中的價值，首先需要進行數據清洗。

現有的數據清洗方式是依靠中心化的系統進行數據處理，然而，在一些場景下，例如，銀行系統中，由于系統數據之間的差異較大，依靠傳統中心化的方法做數據清洗系統不僅浪費大量的資源，同時需要大量的人力去做數據清洗，成本高、效率低。

發明內容

本發明所要解決的技術問題是提供一種基于區塊鏈的數據處理方法，能夠提高數據清洗效率。

本發明還提供了一種基于區塊鏈的數據處理裝置，用以保證上述方法在實際中的實現及應用。

一種基于區塊鏈的數據處理方法，應用于區塊鏈系統中的任務發布節點，所述方法包括：

響應于數據清洗指令，獲取所述數據清洗指令對應的數據清洗任務；所述數據清洗任務包括待清洗數據以及清洗目標；所述待清洗數據包括至少一個異常數據項；

將所述數據清洗任務發往所述區塊鏈系統中的各個預先通過鑒權的任務處理節點；

接收每個所述任務處理節點的任務處理數據；每個所述任務處理節點的任務處理數據由該任務處理節點基于所述清洗目標對所述清洗數據進行處理得到；

利用所述待清洗數據的參考補全信息對每個所述任務處理節點的任務處理數據進行核驗，獲得每個所述任務處理數據的核驗結果；所述參考補全信息通過預先構建的神經網絡模型基于所述待清洗數據中的異常數據項以及每個所述任務處理節點對應的用戶信息預測得到；

對于每個所述任務處理數據，在所述任務處理數據的核驗結果表征所述任務處理數據核驗通過的情況下，對所述任務處理數據進行存儲。

上述的方法，可選的，通過預先構建的神經網絡模型基于所述待清洗數據中的異常數據項以及每個所述任務處理節點對應的用戶信息預測得到參考補全信息的過程，包括：

獲取每個所述任務處理節點對應的用戶信息；每個所述任務處理節點的用戶信息包括所述任務處理節點所屬的用戶處理所述異常數據項的歷史正確率、用戶職業和用戶等級中的至少一種；

將每個所述任務處理節點的用戶信息以及所述異常數據項輸入到所述神經網絡模型，獲得所述神經網絡模型輸出的所述待清洗數據的參考補全信息。

上述的方法，可選的，所述獲得每個所述任務處理數據的核驗結果之后，還包括：

根據每個所述任務處理數據的核驗結果確定每個所述任務處理數據的貢獻度；

根據每個所述任務處理節點的任務貢獻比例、每個所述任務處理數據的共享度以及每個所述任務處理數據的存儲時間，計算得到每個所述任務處理節點的任務評分。

上述的方法，可選的，所述計算得到每個所述任務處理節點的任務評分之后，還包括：