[發明專利]數據訪問方法、裝置、設備及存儲介質

在審

• 申請號: 202211543192.1
• 申請日: 2022-12-02
• 公開（公告）號: CN116089381A
• 公開（公告）日: 2023-05-09
• 發明（設計）人: 王欣興
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06F16/172
• 分類號: G06F16/172;G06F16/16;G06F16/182
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 李彩玲

1.一種數據訪問方法，應用于分布式存儲系統中的存儲設備，包括：

獲取預寫請求；其中，所述預寫請求中包括待寫入數據；

響應于所述預寫請求，將所述待寫入數據和相應描述數據寫入預寫文件；

若所述預寫文件滿足預寫持久化條件，則將所述預寫文件中的數據持久化存儲；

將已持久化的預寫文件中的待寫入數據寫入數據庫文件，并將所述數據庫文件中的數據持久化存儲。

2.根據權利要求1所述的方法，其中，在所述將所述預寫文件中的數據持久化存儲之前，所述方法還包括：

獲取入庫請求；

響應于所述入庫請求，構建所述待寫入數據的寫入請求，并將所述待寫入數據的寫入請求添加至預設存儲結構中；其中，所述預設存儲結構滿足先入先出原則；

所述將已持久化的預寫文件中的待寫入數據寫入數據庫文件，包括：

從所述預設存儲結構中順序讀取已持久化的待寫入數據的寫入請求，并將所讀取寫入請求從所述預設存儲結構中刪除，且將所讀取寫入請求對應待寫入數據寫入數據庫文件。

3.根據權利要求2所述的方法，其中，所述待寫入數據的寫入請求中包括自身的請求標識；

在所述將所述預寫文件中的數據持久化存儲之后，所述方法還包括：

將預設文件中最新持久化的數據對應請求標識作為參考標識；

所述從所述預設存儲結構中順序讀取已持久化的待寫入數據的寫入請求，并將所讀取寫入請求從所述預設存儲結構中刪除，且將所讀取寫入請求對應待寫入數據寫入數據庫文件，包括：

從所述預設存儲結構中順序讀取寫入請求；

若所讀取寫入請求的請求標識分配于所述參考標識之前，則將所讀取寫入請求從所述預設存儲結構中刪除，且將所讀取寫入請求對應待寫入數據寫入數據庫文件。

4.根據權利要求3所述的方法，其中，寫入請求的請求標識按照順序遞增方式進行分配；

所述若所讀取寫入請求的請求標識分配于所述參考標識之前，則將所讀取寫入請求從所述預設存儲結構中刪除，包括：

若所讀取寫入請求的請求標識不大于所述參考標識，則將所讀取寫入請求從所述預設存儲結構中刪除。

5.根據權利要求2-4任一項所述的方法，其中，所述預設存儲結構為鏈表或隊列。

6.根據權利要求2-5任一項所述的方法，其中，所述待寫入數據的寫入請求中還包括所述待寫入數據的寫入范圍；所述方法還包括：

獲取對待讀取數據的讀請求；

響應于所述讀請求，根據所述待讀取數據的讀取范圍，以及所述預設存儲結構中預寫文件的寫入范圍，確定交疊范圍和未交疊范圍；

從所述預設存儲結構中的寫入請求對應預寫文件中，讀取所述交疊范圍內的待讀取數據；以及，

從持久化存儲結構的已寫入數據庫文件對應數據中，讀取所述未交疊范圍內的待讀取數據。

7.根據權利要求2-6任一項所述的方法，其中，所述獲取預寫請求，包括：

獲取客戶端發起的寫請求，并將所述寫請求作為分布式存儲系統中主存儲設備的預寫請求；或者，

獲取分布式存儲系統中主存儲設備的預寫文件同步通知，并將所述預寫文件同步通知作為分布式存儲系統中所述主存儲設備對應從存儲設備的預寫請求。

8.根據權利要求7所述的方法，其中，所述獲取入庫請求，包括：

獲取所述分布式存儲系統中所述主存儲設備對應從存儲設備反饋的預寫文件同步完成通知，并將接收到的超出預設數量閾值時的預寫文件同步完成通知，作為所述主存儲設備的入庫請求；或者，

獲取所述主存儲設備將寫入請求添加至預設存儲結構后發起的寫入請求同步通知，并將所述寫入請求同步通知，作為所述從存儲設備的入庫請求。