[發明專利]數據處理方法、裝置、計算機設備及存儲介質

在審

• 申請號: 202110004427.9
• 申請日: 2021-01-04
• 公開（公告）號: CN112732717A
• 公開（公告）日: 2021-04-30
• 發明（設計）人: 薛偉鵬;朱成寶
• 申請（專利權）人: 廣州方硅信息技術有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/23;G06F16/2455;G06F16/27
• 代理公司: 廣州利能知識產權代理事務所(普通合伙) 44673
• 代理人: 王增鑫

1.一種數據處理方法，其特征在于，包括：

獲取待存儲的名單數據，其中，所述名單數據中包括多條名單信息；

基于所述名單數據，生成與所述名單數據對應的布隆過濾器的第一參數因子，其中，所述第一參數因子包括：布隆過濾器的大小以及參與存儲運算的多個哈希函數；

將所述名單數據中的名單信息逐條輸入至所述多個哈希函數中，生成與所述名單信息映射的多個偏移數字；

將所述偏移數字映射至預設的存儲位圖的位圖點陣中，并將所述偏移數字對應的存儲柵格標記為存儲狀態，其中，所述存儲位圖的大小與所述布隆過濾器的大小成正相關。

2.根據權利要求1所述的數據處理方法，其特征在于，所述基于所述名單數據，生成與所述名單數據對應的布隆過濾器的第一參數因子包括：

獲取所述名單數據中表征所述名單信息條數的數據參數；

將所述數據參數表征的數值與預設的參考閾值進行比對；

當所述數據參數表征的數值大于或者等于所述參考閾值，確定生成與所述名單數據對應的布隆過濾器的第一參數因子。

3.根據權利要求1所述的數據處理方法，其特征在于，所述基于所述名單數據，生成與所述名單數據對應的布隆過濾器的第一參數因子之后，包括：

獲取互聯節點的節點通信列表；

基于所述通信列表，將所述第一參數因子擴散至分布式網絡中，以使所述分布式網絡中其余節點根據擴散信息更新各自布隆過濾器的參數值。

4.根據權利要求1所述的數據處理方法，其特征在于，所述將所述名單數據中的名單信息逐條輸入至所述多個哈希函數中，生成與所述名單信息映射的多個偏移數字包括：

將所述名單數據中的名單信息逐條輸入至所述多個哈希函數中，生成與所述名單信息映射的多個哈希值；

對所述多個哈希值分別進行取余運算，生成所述多個偏移數字。

5.根據權利要求1所述的數據處理方法，其特征在于，所述將所述偏移數字映射至預設的存儲位圖的位圖點陣中，并將所述偏移數字對應的存儲柵格標記為存儲狀態之后，包括：

獲取所述名單數據的業務標識；

基于預設的數據存儲格式，將所述名單數據存儲至與所述業務標識對應的數據集合中；

更新所述數據集合所在數據庫中的鍵值，并更新所述名單數據同步完成的同步完成標識。

6.根據權利要求1所述的數據處理方法，其特征在于，所述將所述偏移數字映射至預設的存儲位圖的位圖點陣中，并將所述偏移數字對應的存儲柵格標記為存儲狀態之后，包括：

獲取待處理的用戶請求，其中，所述用戶請求中包括目標名單信息，以及所述目標名單信息的目標業務標識；

基于所述目標業務標識，讀取與所述目標業務標識對應的目標布隆過濾器的第二參數因子，其中，所述第二參數因子包括：所述目標布隆過濾器的多個目標哈希函數；

將所述目標名單信息分別輸入至所述多個目標哈希函數中，并對哈希運算結果進行取余運算，生成與所述目標名單信息對應的多個目標偏移數字；

在所述存儲位圖中查找所述多個目標偏移數字的存儲狀態；

當且僅當所述多個目標偏移數字均為存儲狀態，確認所述目標名單信息記錄在所述名單數據中。

7.根據權利要求6所述的數據處理方法，其特征在于，所述確認所述目標名單信息記錄在所述名單數據中之后，包括：

根據所述確認結果生成返回標志；

將所述返回標志返回至發送所述用戶請求的用戶終端，并將所述確認結果進行本地存儲。