[發明專利]一種計算機大數據存儲方法及裝置

在審

• 申請號: 202111107982.0
• 申請日: 2021-09-22
• 公開（公告）號: CN113779610A
• 公開（公告）日: 2021-12-10
• 發明（設計）人: 馬楠
• 申請（專利權）人: 北京本地通科技有限公司
• 主分類號: G06F21/60
• 分類號: G06F21/60;G06F21/62;G06F21/64
• 代理公司: 成都魚爪智云知識產權代理有限公司 51308
• 代理人: 梁悅敏

1.一種計算機大數據存儲方法，其特征在于，包括以下步驟：

獲取并根據樣本大數據提取數據類別信息；

根據數據類別信息建立對應數據類別的存儲庫；

根據預置的數據抓取量設定數據抓取節點，并建立抓取節點與存儲庫之間的數據傳輸通道；

通過抓取節點按照預設的抓取周期對大數據進行抓取，并對抓取的大數據進行分類，以得到數據分類信息；

根據數據分類信息對各個類別的大數據分別進行加密，以得到多個類別加密數據；

根據數據分類信息通過抓取節點將各個類別加密數據上傳至對應的存儲庫中。

2.根據權利要求1所述的一種計算機大數據存儲方法，其特征在于，還包括以下步驟：

根據預設的重要等級信息在各個存儲庫中建立多個不同重要等級的數據鏈表；

根據類別加密數據的加密信息將存儲庫中的數據存儲至存儲庫中對應的數據鏈表中。

3.根據權利要求2所述的一種計算機大數據存儲方法，其特征在于，還包括以下步驟：

對各個數據鏈表進行標記，生成標記信息；

將存儲有數據的數據鏈表進行亂序編排，并根據標記信息生成鏈表編排信息。

4.根據權利要求1所述的一種計算機大數據存儲方法，其特征在于，還包括以下步驟：

錄入并根據抓取節點的地址數據建立對應抓取節點的密鑰，并將各個抓取節點的密鑰發送給對應的存儲庫，通過對應的密鑰對對應抓取節點抓取的大數據進行簽名。

5.一種計算機大數據存儲裝置，其特征在于，包括樣本分析模塊、存儲庫建立模塊、節點傳輸模塊、數據抓取模塊、數據加密模塊以及數據存儲模塊，其中：

樣本分析模塊，用于獲取并根據樣本大數據提取數據類別信息；

存儲庫建立模塊，用于根據數據類別信息建立對應數據類別的存儲庫；

節點傳輸模塊，用于根據預置的數據抓取量設定數據抓取節點，并建立抓取節點與存儲庫之間的數據傳輸通道；

數據抓取模塊，用于通過抓取節點按照預設的抓取周期對大數據進行抓取，并對抓取的大數據進行分類，以得到數據分類信息；

數據加密模塊，用于根據數據分類信息對各個類別的大數據分別進行加密，以得到多個類別加密數據；

數據存儲模塊，用于根據數據分類信息通過抓取節點將各個類別加密數據上傳至對應的存儲庫中。

6.根據權利要求5所述的一種計算機大數據存儲裝置，其特征在于，還包括分級鏈表模塊和鏈表存儲模塊，其中：

分級鏈表模塊，用于根據預設的重要等級信息在各個存儲庫中建立多個不同重要等級的數據鏈表；

鏈表存儲模塊，用于根據類別加密數據的加密信息將存儲庫中的數據存儲至存儲庫中對應的數據鏈表中。

7.根據權利要求6所述的一種計算機大數據存儲裝置，其特征在于，還包括標記模塊和編排模塊，其中：

標記模塊，用于對各個數據鏈表進行標記，生成標記信息；

編排模塊，用于將存儲有數據的數據鏈表進行亂序編排，并根據標記信息生成鏈表編排信息。

8.根據權利要求5所述的一種計算機大數據存儲裝置，其特征在于，還包括數據簽名模塊，用于錄入并根據抓取節點的地址數據建立對應抓取節點的密鑰，并將各個抓取節點的密鑰發送給對應的存儲庫，通過對應的密鑰對對應抓取節點抓取的大數據進行簽名。

9.一種電子設備，其特征在于，包括：

存儲器，用于存儲一個或多個程序；

處理器；

當所述一個或多個程序被所述處理器執行時，實現如權利要求1-4中任一項所述的方法。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，該計算機程序被處理器執行時實現如權利要求1-4中任一項所述的方法。