[發明專利]一種數據讀寫方法及相關裝置

在審

• 申請號: 202211611134.8
• 申請日: 2022-12-14
• 公開（公告）號: CN115858573A
• 公開（公告）日: 2023-03-28
• 發明（設計）人: 王東海
• 申請（專利權）人: 平安銀行股份有限公司
• 主分類號: G06F16/2453
• 分類號: G06F16/2453;G06F16/2455
• 代理公司: 深圳市威世博知識產權代理事務所(普通合伙) 44280
• 代理人: 鐘子敏

本申請公開了一種數據讀寫方法及相關裝置，其中，數據讀寫方法包括：將寫入數據庫中的數據添加到布隆過濾器中；獲取查詢數據請求，基于所述查詢數據請求查詢所述布隆過濾器中是否存在與所述查詢數據請求對應的數據；若所述布隆過濾器中存在所述數據，則從所述數據庫的緩存中查詢所述數據是否存在；若所述緩存中存在所述數據，則從所述緩存中調取所述數據；若所述緩存中不存在所述數據，則從所述數據庫中加載所述數據至所述緩存中以更新所述緩存，并從更新后的所述緩存中調取所述數據。通過上述方法，減少數據庫層面的請求量，提高數據庫的承壓能力。

技術領域

本申請涉及計算機技術領域，特別是涉及一種數據讀寫方法及相關裝置。

背景技術

Redis是一個開源的使用ANSIC語言編寫、支持網絡、可基于內存亦可持久化的日志型、Key-Value數據庫。基于redis的高承壓數據庫，主要是借助redis高吞吐特性，將熱點數據提前放置到redis緩存中，用戶請求數據時，優先從緩存讀取數據，可以大大減小數據庫層面的壓力，同時提升系統響應速度。

但是基于redis緩存數據庫，通常會有這樣的情況發生，數據在緩存中不存在。此時，請求會走到數據庫層面，數據庫檢索到對應數據后，再返回對應數據。試想一下，如果大量請求的數據在緩存和數據庫層面都不存在，此時，會有大量的無效請求命中到數據庫層面，這不僅不能減小數據庫層面的壓力，反而會增加數據庫層面的壓力。

如何過濾掉無效請求，確保進入數據庫內部請求都是有效的，減小數據庫層面請求量是目前高承壓數據庫亟需解決的問題。

發明內容

本申請主要解決的技術問題是提供一種數據讀寫方法及相關裝置，以減少數據庫層面的請求量，提高數據庫的承壓能力。

為了解決上述技術問題，本申請提供一種數據讀寫方法包括：所述數據讀寫方法包括：將寫入數據庫中的數據添加到布隆過濾器中；獲取查詢數據請求，基于所述查詢數據請求查詢所述布隆過濾器中是否存在與所述查詢數據請求對應的數據；若所述布隆過濾器中存在所述數據，則從所述數據庫的緩存中查詢所述數據是否存在；若所述緩存中存在所述數據，則從所述緩存中調取所述數據；若所述緩存中不存在所述數據，則從所述數據庫中加載所述數據至所述緩存中以更新所述緩存，并從更新后的所述緩存中調取所述數據。

其中，所述基于所述查詢數據請求查詢所述布隆過濾器中是否存在與所述查詢數據請求對應的數據的步驟之后，還包括：若所述布隆過濾器中不存在所述數據，則直接返回查詢結果。

其中，所述基于所述查詢數據請求查詢所述布隆過濾器中是否存在與所述查詢數據請求對應的數據的步驟，包括：將所述查詢數據請求中的數據映射成二進制數據；將所述二進制數據的比特位與所述布隆過濾器中存儲的二進制向量的比特位進行比較；若所述二進制數據與所述二進制向量的比特位一致，則確定所述數據存在所述布隆過濾器中；若所述二進制數據與所述二進制向量的比特位不一致，則確定所述數據不存在所述布隆過濾器中。

其中，所述將寫入數據庫中的數據添加到布隆過濾器中的步驟，包括：將所述數據通過多個隨機散列函數映射成二進制數據，并存儲至二進制向量中。

其中，所述若所述緩存中存在所述數據，則從所述緩存中調取所述數據的步驟，包括：判斷所述緩存中的所述數據是否超過有效期限；若超過有效期限，則基于所述數據庫刷新所述緩存中的數據，并從更新的緩存中獲取所述數據；若未超過有效期限，則從所述緩存中獲取所述數據。

其中，所述若所述緩存中不存在所述數據，則從所述數據庫中加載所述數據至所述緩存中以更新所述緩存，并從更新后的所述緩存中調取所述數據的步驟，包括：對所述查詢數據請求進行加鎖處理；所述數據庫基于所述查詢數據請求獲取與所述查詢數據請求對應的數據；將所述數據添加至所述緩存以及所述布隆過濾器中，以更新所述緩存和所述布隆過濾器，并釋放鎖；基于所述數據查詢請求從更新的所述緩存中獲取所述數據。