[發明專利]一種數據存儲規則自動推薦方法、裝置、設備及可讀存儲介質

有效

• 申請號: 201910696205.0
• 申請日: 2019-07-30
• 公開（公告）號: CN110532262B
• 公開（公告）日: 2021-02-05
• 發明（設計）人: 安云杰;魏建鐘;劉強
• 申請（專利權）人: 北京三快在線科技有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/21
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 任亞娟

1.一種數據存儲規則自動推薦方法，其特征在于，包括：

響應于數據優化存儲請求，提取數據倉庫中多個數據表；

獲取用戶針對各所述數據表配置的存儲規則；

根據所述存儲規則重新存儲所述多個數據表為待優化數據表；

獲取所述待優化數據表的屬性；

根據所述待優化數據表的屬性，確定所述待優化數據表的多個可優化存儲方案；

計算各所述可優化存儲方案的存儲效益，其中，根據可優化分區歸檔方案，或可優化壓縮存儲方案、或可優化模型優化方案中的多種，計算各所述可優化存儲方案的存儲效益；

將所述存儲效益最高的所述可優化存儲方案作為最優存儲方案，推薦給所述用戶；

所述計算各所述可優化存儲方案的存儲效益，包括：

提取采用所述可優化分區歸檔方案時，所述待優化數據表的分區查詢熱度小于預設閾值的連續分區；

計算所述連續分區的存儲收益，確定為所述待優化數據表的存儲收益；

或，

提取采用所述可優化壓縮存儲方案時，所述待優化數據表中的重復字段以及對應的重復率；

根據所述重復率計算所述重復字段的存儲收益，確定為所述待優化數據表的存儲收益；

或，

提取采用所述可優化模型優化方案時，所述待優化數據表中的相同粒度表；

提取所述相同粒度表中的冗余字段；

計算所述冗余字段的存儲收益，確定為所述待優化數據表的存儲收益。

2.根據權利要求1所述的方法，其特征在于，所述根據所述存儲規則重新存儲所述多個數據表為待優化數據表，包括：

根據所述存儲規則提取各所述數據表中對應的元數據；

將所述元數據重新存儲為待優化數據表。

3.根據權利要求2所述的方法，其特征在于，所述將所述元數據重新存儲為待優化數據表，包括：

提取所述元數據的元數據指標；所述元數據指標包括分區熱度存儲、字段重復記錄存儲、表間字段冗余存儲、文件大小存儲中的一種或多種；

將所述元數據按照所述分區熱度存儲，和/或所述字段重復記錄存儲，和/或所述表間字段冗余存儲，和/或所述文件大小存儲為待優化快照表，或待優化全量表，或待優化增量表。

4.根據權利要求3所述的方法，其特征在于，所述獲取所述待優化數據表的屬性，包括：

根據所述元數據指標，確定所述待優化數據表的表屬性；所述表屬性包括快照表，或全量表，或增量表。

5.根據權利要求4所述的方法，其特征在于，所述根據所述待優化數據表的屬性，確定所述待優化數據表的多個可優化存儲方案，包括：

在預設指標方案對應關系列表中為所述待優化快照表，或所述待優化全量表，或所述待優化增量表選擇可優化分區歸檔方案，或可優化壓縮存儲方案、或可優化模型優化方案中的多種。