[發明專利]數據寫入處理方法、裝置及電子設備

在審

• 申請號: 202110352865.4
• 申請日: 2021-03-31
• 公開（公告）號: CN113419670A
• 公開（公告）日: 2021-09-21
• 發明（設計）人: 王松波;劉攀
• 申請（專利權）人: 阿里巴巴新加坡控股有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;G06F11/14
• 代理公司: 北京市惠誠律師事務所 11353
• 代理人: 劉子敬

本申請涉及一種數據寫入處理方法、裝置及電子設備，其中，方法包括：獲取待寫入數據，根據待寫入數據的大小和/或優先級，分配磁盤數據塊空間；向分配的磁盤數據塊空間中寫入待寫入數據；更新內存中與該待寫入數據對應的元數據；以預設的更新策略，將內存中的元數據更新到磁盤中。本發明實施例中，在確保數據高效寫入磁盤的前提下，通過以一定的時間間隔來集中更新磁盤中的元數據，從而減少了在數據寫入過程中，對于磁盤的IO訪問次數，有效的提高了磁盤數據的寫入效率。

技術領域

本申請涉及一種數據寫入處理方法、裝置及電子設備，屬于計算機技術領域。

背景技術

隨著云原生應用對可遷移性、擴展性和動態特性的需求，對云原生存儲也帶來了相應的密度、速度、混合度的要求。在云原生場景下，強依賴于支持POSIX(PortableOperating System Interface，可移植操作系統接口)語義的文件系統的應用(例如MySQL)，對于文件系統的彈性部署和性能需求也會變得更加重要。在基于POSIX標準的文件存儲處理中，需要對文件系統對POSIX語義的支持，而POSIX語義在性能上并不適合分布式系統，因此，目前很多會采用本地文件系統來實現基于POSIX標準的文件存儲處理。

傳統本地文件系統，如ext4和xfs，均采用journal機制，在這種機制下，每次IO所需要的更新數據和元數據，當面對大量數據的存儲處理時，會帶來嚴重的寫入放大問題，使文件系統的性能嚴重降低，不利于云原生存儲的應用場景。

發明內容

本發明實施例提供一種數據寫入處理方法、裝置及電子設備，以提高向磁盤寫入數據的效率。

為了實現上述目的，本發明實施例提供了一種數據寫入處理方法，包括：

獲取待寫入數據，根據所述待寫入數據的大小和/或優先級，分配磁盤數據塊空間；

向分配的磁盤數據塊空間中寫入所述待寫入數據；

更新內存中與該待寫入數據對應的元數據；

以預設的更新策略，將所述內存中的元數據更新到所述磁盤中。

本發明實施例還提供了一種數據寫入處理裝置，包括：

數據塊空間分配模塊，用于獲取待寫入數據，根據所述待寫入數據的大小和/或優先級，分配磁盤數據塊空間；

磁盤數據寫入模塊，用于向分配的磁盤數據塊空間中寫入所述待寫入數據；

內存元數據更新模塊，用于更新內存中與該待寫入數據對應的元數據；

磁盤元數據更新模塊，用于以預設的更新策略，將所述內存中的元數據更新到所述磁盤中。

本發明實施例還提供了一種電子設備，包括：

存儲器，用于存儲程序；

處理器，用于運行所述存儲器中存儲的所述程序，以執行前述的數據寫入處理方法。

本發明實施例的數據寫入處理方法、裝置及電子設備，在確保數據高效寫入磁盤的前提下，通過以一定的時間間隔來集中更新磁盤中的元數據，從而減少了在數據寫入過程中，對于磁盤的IO訪問次數，有效的提高了磁盤數據的寫入效率。

上述說明僅是本發明技術方案的概述，為了能夠更清楚了解本發明的技術手段，而可依照說明書的內容予以實施，并且為了讓本發明的上述和其它目的、特征和優點能夠更明顯易懂，以下特舉本發明的具體實施方式。

附圖說明

圖1為本發明實施例的本地文件系統的數據存儲結構示意圖；

圖2為本發明實施例的本地文件系統的數據寫入原理示意圖；

圖3為本發明實施例的數據寫入處理方法的流程示意圖；