[發明專利]一種數據處理方法、裝置、電子設備以及存儲介質

在審

• 申請號: 202011281592.0
• 申請日: 2020-11-16
• 公開（公告）號: CN112383312A
• 公開（公告）日: 2021-02-19
• 發明（設計）人: 孟川榮;盧祚
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: H03M7/30
• 分類號: H03M7/30
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本申請公開了一種數據處理方法、裝置、電子設備以及存儲介質，涉及云計算技術領域，進一步涉及分布式數據存儲技術。具體實現方案為：根據數據存儲端中候選業務數據的屬性信息，從所述候選業務數據中選擇待壓縮業務數據；生成攜帶有所述待壓縮業務數據的離線壓縮請求；向數據處理端發送所述離線壓縮請求，用于指示所述數據處理端對所述待壓縮業務數據進行離線壓縮，且向所述數據存儲端反饋壓縮結果；采用壓縮結果替換數據存儲端中的所述待壓縮業務數據。本申請能夠降低數據存儲端(例如分布式存儲系統)的數據存儲成本，為分布式存儲系統合理存儲數據提供了一種新思路。

技術領域

本申請涉及計算機技術領域，尤其涉及云計算技術，具體涉及一種數據處理方法、裝置、電子設備以及存儲介質。

背景技術

目前進行分布式存儲，通常是獲取到數據后直接寫入分布式存儲系統中。隨著時間推移，存儲到分布式存儲系統中的數據量越來越大，由于分布式存儲系統的存儲空間有限，現有的分布式存儲系統難以滿足大量數據的存儲需求，亟需改進。

發明內容

本公開提供了一種數據處理方法、裝置、電子設備以及存儲介質。

根據本公開的一方面，提供了一種數據處理方法，該方法包括：

根據數據存儲端中候選業務數據的屬性信息，從所述候選業務數據中選擇待壓縮業務數據；

生成攜帶有所述待壓縮業務數據的離線壓縮請求；

向數據處理端發送所述離線壓縮請求，用于指示所述數據處理端對所述待壓縮業務數據進行離線壓縮，且向所述數據存儲端反饋壓縮結果；

采用壓縮結果替換數據存儲端中的所述待壓縮業務數據。

根據本公開的另一方面，提供了一種數據處理方法，該方法包括：

獲取數據存儲端發送的攜帶有待壓縮業務數據的離線壓縮請求，所述待壓縮業務數據基于數據存儲端中候選業務數據的屬性信息，從所述后續按業務數據中選擇；

對所述待壓縮業務數據進行離線壓縮，并向所述數據存儲端反饋壓縮結果。

根據本公開的另一方面，提供了一種數據處理裝置，該裝置包括：

數據選擇模塊，用于根據數據存儲端中后續按業務數據的屬性信息，從所述候選業務數據中選擇待壓縮業務數據；

離線請求生成模塊，用于生成攜帶有所述待壓縮業務數據的離線壓縮請求；

離線請求發送模塊，用于向數據處理端發送所述離線壓縮請求，用于指示所述數據處理端對所述待壓縮業務數據進行離線壓縮，且向所述數據存儲端反饋壓縮結果；

數據寫入模塊，用于采用壓縮結果替換數據存儲端中的所述待壓縮業務數據。

根據本公開的另一方面，提供了一種數據處理裝置，該裝置包括：

離線請求獲取模塊，用于獲取數據存儲端發送的攜帶有待壓縮業務數據的離線壓縮請求，所述待壓縮業務數據基于數據存儲端中候選業務數據的屬性信息，從所述候選業務數據中選擇；

離線壓縮模塊，用于對所述待壓縮業務數據進行離線壓縮，并向所述數據存儲端反饋壓縮結果。

根據本公開的另一方面，提供了一種電子設備，該電子設備包括：

至少一個處理器；以及

與所述至少一個處理器通信連接的存儲器；其中，

所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行本申請任一實施例所述的數據處理方法。