[發明專利]一種元數據處理方法、裝置及電子設備和存儲介質有效
| 申請號: | 202110326013.8 | 申請日: | 2021-03-26 |
| 公開(公告)號: | CN113064859B | 公開(公告)日: | 2022-11-04 |
| 發明(設計)人: | 陶桐桐 | 申請(專利權)人: | 山東英信計算機技術有限公司 |
| 主分類號: | G06F16/13 | 分類號: | G06F16/13;G06F16/16;G06F16/178;G06F11/07 |
| 代理公司: | 北京集佳知識產權代理有限公司 11227 | 代理人: | 史翠 |
| 地址: | 250001 山東省濟南市高新區*** | 國省代碼: | 山東;37 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據處理 方法 裝置 電子設備 存儲 介質 | ||
1.一種元數據處理方法,其特征在于,包括:
讀取存儲桶中桶索引分片上的原始元數據信息,并對同一桶索引分片上的原始元數據信息進行聚合操作,得到聚合元數據信息;
將所述聚合元數據信息保存至桶索引元數據分片上,將所述聚合元數據信息的屬性信息保存至所述桶索引分片上;
刪除所述桶索引分片上的所述原始元數據信息;
其中,若所述原始元數據信息以鍵值對的形式保存在所述桶索引分片上,則所述對同一桶索引分片上的原始元數據信息進行聚合操作,得到聚合元數據信息,包括:
對同一桶索引分片上的原始元數據信息中的鍵和值分別進行聚合操作,得到聚合元數據信息的聚合鍵和聚合值;
相應的,將所述聚合元數據信息保存至桶索引元數據分片上,包括:
將所述聚合元數據信息以鍵值對的形式保存至桶索引元數據分片上。
2.根據權利要求1所述元數據處理方法,其特征在于,所述對同一桶索引分片上的原始元數據信息進行聚合操作,得到聚合元數據信息,包括:
確定聚合對象數量,對同一桶索引分片上的原始元數據信息進行聚合操作,使得聚合元數據信息包含的對象數量為所述聚合對象數量。
3.根據權利要求1所述元數據處理方法,其特征在于,所述對同一桶索引分片上的原始元數據信息進行聚合操作,包括:
確定所述存儲桶中桶索引分片的數量,并創建對應數量的元數據聚合線程;
利用所述元數據聚合線程對對應桶索引分片上的原始元數據信息進行聚合操作;其中,所述元數據聚合線程與所述桶索引分片一一對應。
4.根據權利要求1所述元數據處理方法,其特征在于,所述讀取存儲桶中桶索引分片上的原始元數據信息之前,還包括:
判斷是否開啟元數據聚合;
若是,則執行所述讀取存儲桶中桶索引分片上的原始元數據信息的步驟。
5.根據權利要求1所述元數據處理方法,其特征在于,所述聚合元數據信息的屬性信息包括所述聚合元數據信息包含的對象、聚合時間、對象數量、總大小中任一項或任幾項的組合。
6.根據權利要求1至5中任一項所述元數據處理方法,其特征在于,還包括:
若接收到目標元數據信息的讀寫請求,則獲取所述桶索引分片上的屬性信息,并基于所述屬性信息確定所述目標元數據信息所屬的目標聚合元數據信息;
從所述桶索引元數據分片上獲取所述目標聚合元數據信息,并在所述目標聚合元數據信息中確定所述目標元數據信息。
7.一種元數據處理裝置,其特征在于,包括:
聚合模塊,用于讀取存儲桶中桶索引分片上的原始元數據信息,并對同一桶索引分片上的原始元數據信息進行聚合操作,得到聚合元數據信息;
保存模塊,用于將所述聚合元數據信息保存至桶索引元數據分片上,將所述聚合元數據信息的屬性信息保存至所述桶索引分片上;
刪除模塊,用于刪除所述桶索引分片上的所述原始元數據信息;
其中,若所述原始元數據信息以鍵值對的形式保存在所述桶索引分片上,則所述對同一桶索引分片上的原始元數據信息進行聚合操作,得到聚合元數據信息,包括:
對同一桶索引分片上的原始元數據信息中的鍵和值分別進行聚合操作,得到聚合元數據信息的聚合鍵和聚合值;
相應的,將所述聚合元數據信息保存至桶索引元數據分片上,包括:
將所述聚合元數據信息以鍵值對的形式保存至桶索引元數據分片上。
8.一種電子設備,其特征在于,包括:
存儲器,用于存儲計算機程序;
處理器,用于執行所述計算機程序時實現如權利要求1至6任一項所述元數據處理方法的步驟。
9.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質上存儲有計算機程序,所述計算機程序被處理器執行時實現如權利要求1至6任一項所述元數據處理方法的步驟。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于山東英信計算機技術有限公司,未經山東英信計算機技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110326013.8/1.html,轉載請聲明來源鉆瓜專利網。





