[發明專利]一種數據處理方法、裝置、電子設備以及存儲介質在審
| 申請號: | 202011281592.0 | 申請日: | 2020-11-16 |
| 公開(公告)號: | CN112383312A | 公開(公告)日: | 2021-02-19 |
| 發明(設計)人: | 孟川榮;盧祚 | 申請(專利權)人: | 北京百度網訊科技有限公司 |
| 主分類號: | H03M7/30 | 分類號: | H03M7/30 |
| 代理公司: | 北京品源專利代理有限公司 11332 | 代理人: | 孟金喆 |
| 地址: | 100085 北京市*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據處理 方法 裝置 電子設備 以及 存儲 介質 | ||
1.一種數據處理方法,包括:
根據數據存儲端中候選業務數據的屬性信息,從所述候選業務數據中選擇待壓縮業務數據;
生成攜帶有所述待壓縮業務數據的離線壓縮請求;
向數據處理端發送所述離線壓縮請求,用于指示所述數據處理端對所述待壓縮業務數據進行離線壓縮,且向所述數據存儲端反饋壓縮結果;
采用壓縮結果替換數據存儲端中的所述待壓縮業務數據。
2.根據權利要求1所述的方法,其中,根據數據存儲端中候選業務數據的屬性信息,從所述候選業務數據中選擇待壓縮業務數據,包括:
根據數據存儲端中候選業務數據的讀取頻次,從所述候選業務數據中選擇待壓縮業務數據。
3.根據權利要求1所述的方法,其中,生成攜帶有所述待壓縮業務數據的離線壓縮請求,包括:
確定壓縮算法和壓縮閾值;
生成攜帶有壓縮算法、壓縮閾值和所述待壓縮業務數據的離線壓縮請求。
4.一種數據處理方法,包括:
獲取數據存儲端發送的攜帶有待壓縮業務數據的離線壓縮請求,所述待壓縮業務數據基于數據存儲端中候選業務數據的屬性信息,從所述候選業務數據中選擇;
對所述待壓縮業務數據進行離線壓縮,并向所述數據存儲端反饋壓縮結果。
5.根據權利要求4所述的方法,其中,對所述待壓縮業務數據進行離線壓縮,包括:
根據待壓縮業務數據的類型,確定壓縮算法;
采用壓縮算法,對所述待壓縮業務數據進行離線壓縮。
6.根據權利要求4所述的方法,其中,對所述待壓縮業務數據進行離線壓縮,并向所述數據存儲端反饋壓縮結果,包括:
對所述待壓縮業務數據進行離線壓縮,并對壓縮結果進行壓縮校驗;
在校驗結果為通過的情況下,向所述數據存儲端反饋壓縮結果。
7.根據權利要求6所述的方法,其中,對壓縮結果進行壓縮校驗,包括:
對壓縮結果進行解壓,并根據所述待壓縮業務數據,對解壓后的數據進行校驗。
8.根據權利要求4所述的方法,其中,對所述待壓縮業務數據進行離線壓縮,包括:
確定所述待壓縮業務數據的優先級;
按照所述優先級,采用壓縮算法對所述待壓縮業務數據進行離線壓縮。
9.根據權利要求8所述的方法,其中,按照所述優先級,采用壓縮算法對所述待壓縮業務數據進行離線壓縮,包括:
確定優先級隊列中等于所述優先級和大于所述優先級的請求數量;
根據所述請求數量和極限處理請求數,采用壓縮算法對所述待壓縮業務數據進行離線壓縮。
10.根據權利要求4所述的方法,還包括:
獲取用戶發起的在線數據寫入請求;
對所述在線數據寫入請求中的待寫入業務數據進行在線壓縮,并向所述數據存儲端發送包括壓縮后的業務數據的數據存儲請求,用于指示所述數據存儲端將壓縮后的業務數據寫入所述數據存儲端中。
11.根據權利要求4所述的方法,還包括:
根據用戶發起的數據讀取請求中攜帶的文件名稱,從所述數據存儲端獲取待解壓業務數據和所述待解壓業務數據的元信息;其中,所述元信息至少包括壓縮算法;
根據所述元信息,對待解壓業務數據進行解壓,并向用戶反饋解壓結果。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京百度網訊科技有限公司,未經北京百度網訊科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011281592.0/1.html,轉載請聲明來源鉆瓜專利網。





