[發明專利]一種圖數據庫數據刪除方法、系統、電子設備及存儲介質

在審

• 申請號: 202110721290.9
• 申請日: 2021-06-28
• 公開（公告）號: CN113536047A
• 公開（公告）日: 2021-10-22
• 發明（設計）人: 鄭天昊;裴玉超
• 申請（專利權）人: 北京明略軟件系統有限公司
• 主分類號: G06F16/901
• 分類號: G06F16/901;G06F16/903
• 代理公司: 青島清泰聯信知識產權代理有限公司 37256
• 代理人: 李紅巖

本發明提出一種圖數據庫數據刪除方法、系統、電子設備及存儲介質，其方法技術方案包括圖數據格式化步驟，將一圖數據庫中的圖數據格式化為數據庫表，并將所述數據庫表同步至一可進行聯機分析的列式數據庫管理系統中；數據查詢拼接步驟，使用一LSM?Tree形式的存儲引擎作為所述圖數據庫的底層存儲，通過查詢所述列式數據庫管理系統中存儲的所述圖數據，拼接出所述圖數據在所述存儲引擎中存儲的key值；圖數據刪除步驟，根據所述key值對所述圖數據庫進行刪除操作。本申請解決了現有圖數據庫數據刪除方法在進行大量圖數據刪除時效率低下的問題。

技術領域

本發明屬于數據庫技術領域，尤其涉及一種圖數據庫數據刪除方法、系統、電子設備及存儲介質。

背景技術

近年來，隨著互聯網和社交網絡的快速發展，大規模的圖結構數據逐漸增多，例如將知識圖譜、社交網絡等信息抽象成的圖結構數據。相比于傳統的大數據處理系統，圖系統能更好地利用圖的結構信息，對圖數據的處理更為高效。隨著圖結構化數據的增多，如何高效處理大量圖結構數據成為研究的熱點。利用底層存儲特性更好的滿足業務場景和性能要求也是圖數據庫的重點。

RocksDB是使用C++編寫的嵌入式kv存儲引擎，其鍵值均允許使用二進制流，使用LSM存儲引擎。ClickHouse是一個用于聯機分析(OLAP)的列式數據庫管理系統(DBMS)。由于RocksDB是LSM-Tree存儲引擎，在做了大量數據刪除而且還沒有進行compaction時，大量的刪除墓碑會導致數據查詢性能低下，而在大量圖數據刪除時又同時需要到庫中查詢需要刪除的點或者邊的ID來做刪除的KEY，這時低下的查詢性能會導致整個過程越來越慢。

發明內容

本申請實施例提供了一種圖數據庫數據刪除方法、系統、電子設備及存儲介質，以至少解決現有圖數據庫數據刪除方法在進行大量圖數據刪除時效率低下的問題。

第一方面，本申請實施例提供了一種圖數據庫數據刪除方法，包括：圖數據格式化步驟，將一圖數據庫中的圖數據格式化為數據庫表，并將所述數據庫表同步至一可進行聯機分析的列式數據庫管理系統中；數據查詢拼接步驟，使用一LSM-Tree形式的存儲引擎作為所述圖數據庫的底層存儲，通過查詢所述列式數據庫管理系統中存儲的所述圖數據，拼接出所述圖數據在所述存儲引擎中存儲的key值；圖數據刪除步驟，根據所述key值對所述圖數據庫進行刪除操作。

優選的，所述圖數據刪除步驟進一步包括：若以整個標簽為刪除對象，則所述圖數據庫在圖中暫停接收服務，并在刪除數據后對所述存儲引擎中存放數據的列族進行合并操作。

優選的，所述圖數據刪除步驟進一步包括：當所述存儲引擎中的所述圖數據刪除完成后，通過刪除所述列式數據庫管理系統中的表實現數據一致。

優選的，所述圖數據刪除步驟進一步包括：若以一標簽中一數據為刪除對象，則通過邏輯刪除進行刪除操作，并在刪除數據后，根據一預設周期對所述存儲引擎中存放數據的列族進行合并操作。

第二方面，本申請實施例提供了一種圖數據庫數據刪除系統，適用于上述一種圖數據庫數據刪除方法，包括：圖數據格式化模塊，將一圖數據庫中的圖數據格式化為數據庫表，并將所述數據庫表同步至一可進行聯機分析的列式數據庫管理系統中；數據查詢拼接模塊，使用一LSM-Tree形式的存儲引擎作為所述圖數據庫的底層存儲，通過查詢所述列式數據庫管理系統中存儲的所述圖數據，拼接出所述圖數據在所述存儲引擎中存儲的key值；圖數據刪除模塊，根據所述key值對所述圖數據庫進行刪除操作。

在其中一些實施例中，所述圖數據刪除模塊進一步包括：若以整個標簽為刪除對象，則所述圖數據庫在圖中暫停接收服務，并在刪除數據后對所述存儲引擎中存放數據的列族進行合并操作。

在其中一些實施例中，所述圖數據刪除模塊進一步包括：當所述存儲引擎中的所述圖數據刪除完成后，通過刪除所述列式數據庫管理系統中的表實現數據一致。