[發明專利]一種數據處理方法、裝置、電子設備及存儲介質

在審

• 申請號: 202110347805.3
• 申請日: 2021-03-31
• 公開（公告）號: CN112948409A
• 公開（公告）日: 2021-06-11
• 發明（設計）人: 曾利輝
• 申請（專利權）人: 中國建設銀行股份有限公司
• 主分類號: G06F16/23
• 分類號: G06F16/23;G06F16/2455;G06F16/2453;G06F3/06
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發明實施例涉及大數據技術領域，公開了一種數據處理方法、裝置、電子設備及存儲介質，該方法包括：當接收到數據處理指令時，根據所述數據處理指令以及緩存模式確定緩存與數據庫的處理順序；根據所述處理順序依次對緩存和數據庫進行與所述數據處理指令匹配的處理操作，以使緩存數據與數據庫數據保持一致。通過本發明實施例的技術方案，實現了保證緩存數據與數據庫數據一致的目的。

技術領域

本發明實施例涉及大數據技術領域，尤其涉及一種數據處理方法、裝置、電子設備及存儲介質。

背景技術

隨著計算機和通訊技術的發展，人類進入了大數據時代。大數據平臺下數據的存儲以及傳輸與傳統平臺相比有很大的不同。在數據查詢、檢索等領域中應用的大數據平臺，對能夠及時獲得目標數據有著很高的要求。因此，如何在海量的數據中快速獲取到目標數據，對大數據平臺來說是一個挑戰。為了解決上述問題，目前大數據平臺存儲系統的構造分為兩部分，一是數據庫組件，此部分主要用來存放原始數據；二是緩存組件，此部分主要用來存放查詢結果，其中，所述查詢結果為數據庫組件中的數據副本。

在具有緩存組件的大數據平臺中，數據的傳輸方式為：當前端發來數據請求時，系統會先去緩存中查詢，如果緩存中存有與所述數據請求匹配的目標數據，則直接從緩存中讀取目標數據，并返回給前端。如果緩存中沒有與所述數據請求匹配的目標數據，則系統會去查詢數據庫，從數據庫中取出與所述數據請求匹配的目標數據，將所述目標數據返回給前端的同時，也將所述目標數據寫入到緩存中，以備下次獲取所述目標數據時，提高獲取速度。上述獲取目標數據的方式稱為穿透緩存模式，即在應用讀取目標數據時，若在緩存中沒有讀到目標數據，則透過緩存繼續在數據庫中讀取。對應的，非穿透緩存模式指：應用在讀取目標數據時，若在緩存中沒有讀到目標數據，則直接返回讀取失敗的結果，不再繼續在數據庫中讀取。

緩存和數據庫作為不同的服務部署在不同的環境中，當數據庫中的原始數據發生變化時，由于網絡不穩定、硬件錯誤或者應用異常等原因，會引起緩存和數據庫中數據不一致的問題，嚴重影響系統各項功能的正確性。尤其對于資金交易系統，通常不允許緩存數據與數據庫數據超過秒級的不一致。

發明內容

本發明實施例提供一種數據處理方法、裝置、電子設備及存儲介質，實現了保證緩存數據與數據庫數據一致的目的。

第一方面，本發明實施例提供了一種數據處理方法，該方法包括：

當接收到數據處理指令時，根據所述數據處理指令以及緩存模式確定緩存與數據庫的處理順序；

根據所述處理順序依次對緩存和數據庫進行與所述數據處理指令匹配的處理操作，以使緩存數據與數據庫數據保持一致。

第二方面，本發明實施例還提供了一種數據處理裝置，該裝置包括：

確定模塊，用于當接收到數據處理指令時，根據所述數據處理指令以及緩存模式確定緩存與數據庫的處理順序；

處理模塊，用于根據所述處理順序依次對緩存和數據庫進行與所述數據處理指令匹配的處理操作，以使緩存數據與數據庫數據保持一致。

第三方面，本發明實施例還提供了一種電子設備，所述電子設備包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當所述一個或多個程序被所述一個或多個處理器執行，使得所述一個或多個處理器實現如本發明實施例任一所述的數據處理方法。

第四方面，本發明實施例還提供了一種包含計算機可執行指令的存儲介質，所述計算機可執行指令在由計算機處理器執行時用于執行如本發明實施例任一所述的數據處理方法。