[發明專利]數據處理方法、系統、裝置、存儲介質以及電子設備

在審

• 申請號: 202210499824.2
• 申請日: 2022-05-09
• 公開（公告）號: CN114895852A
• 公開（公告）日: 2022-08-12
• 發明（設計）人: 羅海豪;張旭明;王豪邁;胥昕
• 申請（專利權）人: 北京星辰天合科技股份有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 黃海英

本申請公開了一種數據處理方法、系統、裝置、存儲介質以及電子設備。該方法包括：獲取客戶端發送的寫請求，并解析寫請求，得到對象存儲桶創建指令和對象數據寫入指令；解析對象存儲桶創建指令，得到對象存儲桶的屬性信息；在數據存儲池中的存儲路徑下創建存儲文件夾，并將屬性信息存儲至元數據存儲池中；解析對象數據寫入指令，得到待寫入的目標對象數據，根據解析到的存儲路徑在數據存儲池中定位存儲文件夾，并將目標對象數據存儲至存儲文件夾。通過本申請，解決了相關技術中無法兼容多種服務器讀寫相同存儲文件的問題。

技術領域

本申請涉及數據處理領域，具體而言，涉及一種數據處理方法、系統、裝置、存儲介質以及電子設備。

背景技術

在客戶端進行對象數據存儲的時候，通常需要通過對象網關進行對象數據的存儲。當前使用較多的對象存儲系統為Ceph系統，在Ceph系統中，數據可以通過對象存儲的方式存儲于對象存儲設備中，同時，在使用S3(Amazon Simple Storage Service一種對象存儲服務)的情況下，Ceph系統還提供了兼容Amazon S3的restful API接口，可以通過S3服務器進行對象數據的存儲。

進一步的，由于Ceph核心模塊RADOS提供的訪問接口是私有接口，不支持通用的HTTP協議訪問，因而為了支持HTTP協議訪問，涉及了支持RESTful接口訪問而設計的RADOS網關。Ceph對象存儲使用Ceph對象網關守護進程(radosgw)，它是一個用于與Ceph存儲群集進行交互的HTTP服務器。由于它提供和Amazon S3兼容的接口，因此Ceph對象網關具有自己的用戶管理，并且Ceph對象網關可以將數據存儲在用于存儲來自Ceph文件系統客戶端或Ceph塊設備客戶端的數據的同一Ceph存儲群集中。

然而，雖然Ceph系統可以對S3服務器的數據進行讀寫，但是由于存儲的數據與S3服務器相對應，導致存儲的文件無法通過其余服務器進行讀寫操作，其余服務器在需要相同數據時需要重新存儲相同的數據才可以完成讀寫，導致數據利用率較低。

針對相關技術中無法兼容多種服務器讀寫相同存儲文件的問題，目前尚未提出有效的解決方案。

發明內容

本申請提供一種數據處理方法、系統、裝置、存儲介質以及電子設備，以解決相關技術中無法兼容多種服務器讀寫相同存儲文件的問題。

根據本申請的一個方面，提供了一種數據處理方法。該方法包括：獲取客戶端發送的寫請求，并解析寫請求，得到對象存儲桶創建指令和對象數據寫入指令；解析對象存儲桶創建指令，得到對象存儲桶的屬性信息，其中，屬性信息包括：對象存儲桶對應的存儲文件夾的存儲路徑；在數據存儲池中的存儲路徑下創建存儲文件夾，并將屬性信息存儲至元數據存儲池中；解析對象數據寫入指令，得到待寫入的目標對象數據，根據解析到的存儲路徑在數據存儲池中定位存儲文件夾，并將目標對象數據存儲至存儲文件夾。

可選地，屬性信息還包括對象存儲桶的元數據，在解析對象存儲桶創建指令，得到對象存儲桶的屬性信息之后，該方法還包括：判斷元數據存儲池中是否存儲有對象存儲桶的元數據；在元數據存儲池中存儲有對象存儲桶的元數據的情況下，獲取元數據關聯的存儲路徑，并根據存儲路徑在數據存儲池中定位存儲文件夾，將目標對象數據存儲至存儲文件夾。

可選地，寫請求中還包括對象存儲桶創建指令對應的第一接口信息，在數據存儲池中的存儲路徑下創建存儲文件夾之前，該方法還包括：將第一接口信息按照預設協議轉化方式進行協議轉換，從而得到第二接口信息；通過第二接口信息調用動態鏈接庫中的目標函數；通過目標函數執行在數據存儲池中的存儲路徑下創建存儲文件夾的步驟。