[發明專利]數據的追加寫方法、裝置、設備、介質和程序產品

有效

• 申請號: 202011528388.4
• 申請日: 2020-12-22
• 公開（公告）號: CN112540731B
• 公開（公告）日: 2023-08-11
• 發明（設計）人: 馬井瑋;易正利
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種數據的追加寫方法，包括：

將當前數據追加寫到磁盤；

將內存中預設個數的第一類索引信息追加寫到所述磁盤；

將寫入所述磁盤的所述第一類索引信息的第二類索引信息寫入所述內存；

在所述內存中寫入所述當前數據的第一類索引信息；

其中，所述方法還包括：

將所述磁盤中追加寫入的數據流進行分段，得到至少兩個數據段，其中，所述數據流中包括所述數據和所述第一類索引信息；

如果任一數據段中的空洞個數超出第二預設閾值，則將該數據段中的所述數據和/或所述第一類索引信息遷移到所述數據流的頭部，并清空該數據段的磁盤空間。

2.根據權利要求1所述的方法，在所述將內存中預設個數的第一類索引信息追加寫到所述磁盤之前，所述方法還包括：

響應于所述內存中的第一類索引信息的總數超出第一預設閾值，執行所述將內存中預設個數的第一類索引信息追加寫到所述磁盤的操作；

響應于所述內存中的第一類索引信息的總數未超出第一預設閾值，執行所述在所述內存中寫入所述當前數據的第一類索引信息的操作。

3.根據權利要求1所述的方法，其中，所述將內存中預設個數的第一類索引信息追加寫到所述磁盤，包括：

將內存中的歷史寫入區域的預設個數的第一類索引信息追加寫到所述磁盤。

4.根據權利要求1所述的方法，其中，所述將內存中預設個數的第一類索引信息追加寫到所述磁盤，包括：

將內存中邏輯地址相鄰的預設個數的第一類索引信息追加寫到所述磁盤。

5.根據權利要求1所述的方法，還包括：

根據讀數據請求中的邏輯地址，在所述內存中獲取對應的目標索引信息；

如果所述目標索引信息是所述第一類索引信息，則根據該第一類索引信息在所述磁盤中讀取數據；

如果所述目標索引信息是所述第二類索引信息，則根據該第二類索引信息在所述磁盤中獲取所述邏輯地址對應的第一類索引信息，并根據該第一類索引信息在所述磁盤中讀取數據。

6.根據權利要求1所述的方法，還包括：

按照設定周期，將所述內存中當前周期內的第一類索引信息和第二類索引信息，以檢查點的形式寫入所述磁盤；

其中，所述檢查點是用于在系統重啟時，從磁盤重新加載索引信息到內存的標記。

7.一種數據的追加寫裝置，包括：

數據寫模塊，用于將當前數據追加寫到磁盤；

第一類索引信息寫模塊，用于將內存中預設個數的第一類索引信息追加寫到所述磁盤；

第二類索引信息寫模塊，用于將寫入所述磁盤的所述第一類索引信息的第二類索引信息寫入所述內存；

所述第一類索引信息寫模塊，還用于在所述內存中寫入所述當前數據的第一類索引信息；

其中，所述裝置還包括：

空洞處理模塊，用于將所述磁盤中追加寫入的數據流進行分段，得到至少兩個數據段，其中，所述數據流中包括所述數據和所述第一類索引信息；如果任一數據段中的空洞個數超出第二預設閾值，則將該數據段中的所述數據和/或所述第一類索引信息遷移到所述數據流的頭部，并清空該數據段的磁盤空間。

8.根據權利要求7所述的裝置，還包括判斷模塊，用于在所述第一類索引信息寫模塊將內存中預設個數的第一類索引信息追加寫到所述磁盤之前，執行如下操作：

響應于所述內存中的第一類索引信息的總數超出第一預設閾值，由所述第一類索引信息寫模塊執行所述將內存中預設個數的第一類索引信息追加寫到所述磁盤的操作；

響應于所述內存中的第一類索引信息的總數未超出第一預設閾值，由所述第一類索引信息寫模塊執行所述在所述內存中寫入所述當前數據的第一類索引信息的操作。

9.根據權利要求7所述的裝置，其中，所述第一類索引信息寫模塊，具體用于：

將內存中的歷史寫入區域的預設個數的第一類索引信息追加寫到所述磁盤。