[發明專利]一種優化索引持久化的方法、系統、設備及介質

有效

• 申請號: 202011181128.4
• 申請日: 2020-10-29
• 公開（公告）號: CN112434025B
• 公開（公告）日: 2022-08-12
• 發明（設計）人: 宋奇
• 申請（專利權）人: 蘇州浪潮智能科技有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F3/06
• 代理公司: 北京連和連知識產權代理有限公司 11278
• 代理人: 張濤;張騰

本發明公開了一種優化索引持久化的方法、系統、設備和存儲介質，方法包括：將持久內存設備初始化為非易失性持久模式，并在持久內存設備中創建命名空間；響應于接收到線程申請內存資源的請求，判斷線程是否為持久化索引文件類型的線程；響應于線程為持久化索引文件類型的線程，判斷持久內存設備的狀態是否健康；以及響應于持久內存設備的狀態健康，向線程提供持久內存存儲型內存資源，并根據索引文件的大小在命名空間中分配索引緩存內存。本發明利用持久內存設備代替傳統磁盤作為索引持久化的存儲介質，并且通過持久內存設備中創建的命名空間，提升查詢或檢索數據的性能，并提升讀寫索引文件的效率。

技術領域

本發明涉及持久內存領域，更具體地，特別是指一種優化索引持久化的方法、系統、計算機設備及可讀介質。

背景技術

索引作為一種獨立的對數據表中一個或多個字段的值進行排序的存儲結構，對于關系型數據庫的高效運行十分重要，合理運用索引能夠極大地提升查詢或檢索效率。索引持久化是將內存中的索引文件保存于永久存儲介質中，避免掉電后索引文件丟失，省去宕機重啟后新建索引帶來的時間消耗，提升查詢或檢索性能。索引持久化通常是將索引文件序列化后保存在磁盤等永久性存儲介質中，此過程將產生大量的磁盤IO；另外，當利用索引查詢或檢索數據時，需要將持久化索引文件經過反序列化等操作寫入內存，該過程同樣產生大量的磁盤IO。

一般情況下，索引文件的大小占到其關聯數據表空間的8％左右，在海量數據的查詢或檢索任務中，索引文件所占空間便不容忽視。此時，讀寫持久化索引文件所產生的磁盤IO將影響查詢或檢索數據的性能。

發明內容

有鑒于此，本發明實施例的目的在于提出一種優化索引持久化的方法、系統、計算機設備及計算機可讀存儲介質，通過持久內存設備代替傳統磁盤作為索引持久化的存儲介質，并且通過持久內存設備中創建的命名空間，提升查詢或檢索數據的性能，并提升讀寫索引文件的效率。

基于上述目的，本發明實施例的一方面提供了一種優化索引持久化的方法，包括如下步驟：將持久內存設備初始化為非易失性持久模式，并在所述持久內存設備中創建命名空間；響應于接收到線程申請內存資源的請求，判斷所述線程是否為持久化索引文件類型的線程；響應于所述線程為持久化索引文件類型的線程，判斷所述持久內存設備的狀態是否健康；以及響應于所述持久內存設備的狀態健康，向所述線程提供持久內存存儲型內存資源，并根據索引文件的大小在所述命名空間中分配索引緩存內存。

在一些實施方式中，所述向所述線程提供持久內存存儲型內存資源包括：重構關系型數據庫的內存存儲引擎和索引緩存內存。

在一些實施方式中，所述向所述線程提供持久內存存儲型內存資源包括：重寫內存存儲引擎中緩存索引文件的指向地址，并添加持久內存存儲的層級。

在一些實施方式中，所述向所述線程提供持久內存存儲型內存資源包括：將緩存索引文件的存儲方式指向所述持久內存設備。

在一些實施方式中，方法還包括：響應于所述線程不為持久化索引文件類型的線程，判斷所述線程是否為查詢或檢索數據類型的線程；以及響應于所述線程為查詢或檢索數據類型的線程，為所述線程分配動態隨機存取存儲器運行內存資源。

在一些實施方式中，所述為所述線程分配動態隨機存取存儲器運行內存資源包括：根據查詢或檢索數據語句的類型對不同類型的使用內存進行分配。

在一些實施方式中，所述在所述持久內存設備中創建命名空間包括：獲取所述持久內存設備的實際容量，并根據所述實際容量創建多個大小相同且相互隔離的命名空間。