[發明專利]一種數據處理方法、裝置、設備和存儲介質

有效

• 申請號: 201910069219.X
• 申請日: 2019-01-24
• 公開（公告）號: CN109783523B
• 公開（公告）日: 2022-02-25
• 發明（設計）人: 陳武
• 申請（專利權）人: 廣州虎牙信息科技有限公司
• 主分類號: G06F16/2455
• 分類號: G06F16/2455;G06F16/23
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發明公開了一種數據處理方法、裝置、設備和存儲介質。該方法包括：確定用戶操作數據；從所述用戶操作數據中確定鍵和值；根據所述用戶操作數據的鍵從兩個以上的緩存空間中確定目標空間；在所述目標空間中，按照預設的處理目標將所述用戶操作數據的值寫入所述用戶操作數據的鍵對應的候選集合；若符合預設的處理條件，則按照所述處理目標對所述候選集合中的用戶操作數據的值進行處理。通過該方法可以解決每一條數據都會實時進行兩次網絡交互造成的時間成本大，不僅容易造成網絡擁塞，還會導致不能實時獲得數據交互的問題。

技術領域

本發明實施例涉及數據統計技術，尤其涉及一種數據處理方法、裝置、設備和存儲介質。

背景技術

隨著計算機技術的發展，越來越多的網站選擇使用Redis來布局信息，Redis作為一個高性能的鍵值對(key-value)數據庫，為數據統計提供了很多便利。

在現有技術中，網站每收到一條數據都需要與數據庫中全部數據進行綜合處理，以獲得用戶需求的數據。同時，每一次與數據庫中全部數據進行綜合處理，都需要兩次網絡交互，當數據量很大時，網絡交互的時間成本會很大，不僅容易造成網絡擁塞，還會導致不能實時獲得數據交互的問題。

發明內容

本發明提供一種數據處理方法、裝置、設備和存儲介質，以解決網站每收到一條數據都需要與數據庫中全部數據進行綜合處理，以獲得用戶需求的數據的問題。

第一方面，本發明實施例提供了一種數據處理方法，包括：

確定用戶操作數據；

從所述用戶操作數據中確定鍵和值；

根據所述用戶操作數據的鍵從兩個以上的緩存空間中確定目標空間；

在所述目標空間中，按照預設的處理目標將所述用戶操作數據的值寫入所述用戶操作數據的鍵對應的候選集合；

若符合預設的處理條件，則按照所述處理目標對所述候選集合中的用戶操作數據的值進行處理。

在此基礎上，每個緩存空間具有空間編號；

所述根據所述用戶操作數據的鍵從兩個以上的緩存空間中確定目標空間，包括：

對所述用戶操作數據的鍵進行處理，獲得數據編號；

當所述空間編號與所述數據編號匹配時，將與所述數據編號對應的緩存空間確定為目標空間。

在此基礎上，所述處理目標包括去重處理；

所述在所述目標空間中，按照預設的處理目標將所述用戶操作數據的值寫入所述用戶操作數據的鍵對應的候選集合，包括：

在所述目標空間中，確定所述用戶操作數據的鍵對應的候選集合；

判斷所述候選集合中的值與所述用戶操作數據的值是否相同；

若是，則忽略所述用戶操作數據的值；

若否，則將所述用戶操作數據的值寫入所述候選集合。

在此基礎上，每個所述緩存空間在數據庫中分配有存儲分區；

所述按照所述處理目標對所述候選集合中的用戶操作數據的值進行處理，包括：

從所述目標空間對應的存儲分區中查找所述目標空間中的鍵對應的目標集合；

判斷所述目標集合的值中與所述候選集合中的值是否相同；

若是，則忽略所述候選集合中的值，以確定所述目標集合中值的個數；

若否，則將所述候選集合中的值寫入所述目標集合，以確定所述目標集合中值的個數。