[發明專利]數據存儲方法、數據索引的構建方法、裝置、計算機設備

在審

• 申請號: 202011136081.X
• 申請日: 2020-10-22
• 公開（公告）號: CN112241410A
• 公開（公告）日: 2021-01-19
• 發明（設計）人: 畢研儒;王家堯;呂灼恒
• 申請（專利權）人: 曙光信息產業（北京）有限公司;曙光信息產業股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/27
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 景懷宇

本申請涉及一種數據存儲方法、數據索引的構建方法、裝置、計算機設備和存儲介質。該方法包括：獲取計算節點的指標數據；根據指標數據的類型對指標數據進行分類，得到不同類型的指標數據；將各類型的指標數據存儲至第一存儲空間中與類型對應的存儲區域中，得到各類型的指標數據在對應的存儲區域中所形成的指標數據片；當存儲區域中存儲的指標數據片的體量達到體量閾值時，將存儲區域中存儲的指標數據片發送至第二存儲空間中進行存儲。采用本方法，可以減少指標數據寫入第二存儲空間的次數，降低了因第二存儲空間的讀寫性能所帶來的不利影響，提高了指標數據的存儲效率。

技術領域

本申請涉及數據存儲技術領域，特別是涉及一種數據存儲方法、數據索引的構建方法、裝置、計算機設備和存儲介質。

背景技術

隨著計算機技術的發展，出現了計算機集群技術。計算機集群的作用是為了改進單個計算機的計算速度和/或可靠性。計算機集群中的單個計算機稱為節點，通常通過局域網連接。計算機集群一般由成千上萬個計算節點組成，為了保證計算機集群整體運行狀態的穩定，需要實時監控計算機集群中各計算節點的各項指標。

由于計算節點眾多，且需要頻繁地采集計算機集群中所有計算節點的指標數據，因此指標數據的體量很大。在對如此龐大的指標數據進行統一存儲時，受限于存儲空間的讀寫性能例如每秒讀寫次數，導致存儲效率較低。

發明內容

基于此，有必要針對上述技術問題，提供一種能夠提高存儲效率的數據存儲方法、數據索引的構建方法、裝置、計算機設備和存儲介質。

一種數據存儲方法，所述方法包括：

獲取計算節點的指標數據；

根據所述指標數據的類型對所述指標數據進行分類，得到不同類型的指標數據；

將各所述類型的指標數據存儲至第一存儲空間中與所述類型對應的存儲區域中，得到各所述類型的指標數據在對應的存儲區域中所形成的指標數據片；

當所述存儲區域中存儲的指標數據片的體量達到體量閾值時，將所述存儲區域中存儲的指標數據片發送至第二存儲空間中進行存儲。

上述數據存儲方法中，首先將計算節點的指標數據按照指標數據的類型存儲至第一存儲空間對應的存儲區域中，得到各類型的指標數據在對應的存儲區域中所形成的指標數據片，并在對應的存儲區域中存儲的指標數據片的體量達到體量閾值時，將該存儲區域中存儲的指標數據片發送至第二存儲空間中進行存儲。采用該方法可以減少指標數據寫入第二存儲空間的次數，降低了因第二存儲空間的讀寫性能所帶來的不利影響，提高了指標數據的存儲效率。

在其中一個實施例中，所述當所述存儲區域中存儲的指標數據片的體量達到體量閾值時，將所述存儲區域中存儲的指標數據片發送至第二存儲空間中進行存儲，包括：

當所述存儲區域中存儲的指標數據片的體量達到體量閾值時，將所述存儲區域中存儲的指標數據片，以及所述指標數據片關聯的屬性信息發送至第二存儲空間中進行存儲，以使所述第二存儲空間根據所述指標數據片關聯的屬性信息構建所述指標數據片的索引信息；

其中，所述指標數據片關聯的屬性信息包括所述指標數據片對應的類型、所述指標數據片在對應存儲區域中達到體量閾值的次序、所述指標數據片中的指標數據對應的計算節點的標識或所述指標數據片中的指標數據的采集時間中的至少一種。

本實施例中，將指標數據對應的分片屬性信息發送至第二存儲空間存儲，有利于對指標數據的區分及搜索。

在其中一個實施例中，所述將各所述類型的指標數據存儲至第一存儲空間中與所述類型對應的存儲區域中，得到各所述類型的指標數據在對應的存儲區域中所形成的指標數據片，包括：