[發明專利]索引管理方法、裝置及電子設備

在審

• 申請號: 202110264712.4
• 申請日: 2021-03-11
• 公開（公告）號: CN112783835A
• 公開（公告）日: 2021-05-11
• 發明（設計）人: 李金陽
• 申請（專利權）人: 百果園技術（新加坡）有限公司
• 主分類號: G06F16/13
• 分類號: G06F16/13;G06F16/18;G06F16/182
• 代理公司: 北京博遵律師事務所 11761
• 代理人: 馬佑平

本申請公開了一種索引管理方法、裝置及電子設備，應用于分布式文件系統，所述分布式文件系統包括對象存儲容器，該方法包括：從目標任務序列中，獲取待處理的目標索引分片的目標分片信息，其中，所述目標索引分片隸屬于為所述對象存儲容器分配的索引分片集合，所述目標索引分片中的索引順序排列，所述索引分片集合中的索引分片順序排列，所述目標分片信息包括分片標識和分裂管控信息，所述分片標識用于標識所述目標索引分片；根據所述目標分片信息，對所述目標索引分片執行重新分片處理。該方法可以快速、可靠的對對象存儲容器的索引進行管理，以提升系統寫入性能。

技術領域

本公開涉及計算機技術領域，更具體地，涉及一種索引管理方法、裝置、電子設備及計算機可讀存儲介質。

背景技術

Ceph是一個分布式文件系統，其提供塊(Block)存儲、對象(Object)存儲和文件存儲等存儲方案，是可靠的、可擴展的、統一的、分布式的存儲系統。隨著云平臺的不斷發展，Ceph基于其可靠、可擴展等優點得到了人們的廣泛使用。

目前的Ceph系統中，對象存儲容器(Bucket)往往是基于哈希的方式進行索引管理，其對索引(Bucket Index)進行重新分片(Reshard)的方式例如為：當一對象存儲容器的所有索引分片管理的對象個數超過一定量后，為該對象存儲容器生成1倍的索引分片，再通過哈希的方式將原始索引分片中的所有索引信息重新分配到新的索引分片中。

然而，發明人發現，現有技術在對索引進行重新分片時，在基于新生成的索引分片，將原始分片中的索引重新哈希分配到新的索引分片的過程中，該對象存儲容器將被禁止用戶寫入，即，阻塞用戶寫入；在實際中，對象存儲容器中的對象個數往往是超過百萬級別的，因此，現有的索引管理方法在對索引進行重新分片時，可能存在過長阻塞，進而影響系統寫入性能的問題。

以上，是以Ceph系統為例，說明現有分布式文件系統中索引管理可能存在的問題，由于在其他分布式文件系統中也可能存在以上問題，因此，有必要提供一種索引管理方法以解決上述問題。

發明內容

本公開實施例的一個目的是提供一種用于索引管理的新技術方案。

根據本公開的第一方面，提供了一種索引管理方法，應用于分布式文件系統，所述分布式文件系統包括對象存儲容器，該方法包括：

從目標任務序列中，獲取待處理的目標索引分片的目標分片信息，其中，所述目標索引分片隸屬于為所述對象存儲容器分配的索引分片集合，所述目標索引分片中的索引順序排列，所述索引分片集合中的索引分片順序排列，所述目標分片信息包括分片標識和分裂管控信息，所述分片標識用于標識所述目標索引分片；

根據所述目標分片信息，對所述目標索引分片執行重新分片處理。

根據本公開的第二方面，本公開還提供了一種索引管理裝置，應用于分布式文件系統，所述分布式文件系統包括對象存儲容器，包括：

目標分片信息獲取模塊，用于從目標任務序列中，獲取待處理的目標索引分片的目標分片信息，其中，所述目標索引分片隸屬于為所述對象存儲容器分配的索引分片集合，所述目標索引分片中的索引順序排列，所述索引分片集合中的索引分片順序排列，所述目標分片信息包括分片標識和分裂管控信息，所述分片標識用于標識所述目標索引分片；

重新分片處理模塊，用于根據所述目標分片信息，對所述目標索引分片執行重新分片處理。

根據本公開的第三方面，還提供了一種電子設備，包括根據本公開的第二方面所述的裝置；或者，包括：

存儲器，用于存儲可執行的指令；

處理器，用于根據所述可執行的指令的控制，運行所述電子設備執行根據本公開的第一方面所述的方法。