[發明專利]一種數據表的數據清理方法及裝置

在審

• 申請號: 202110416841.0
• 申請日: 2021-04-19
• 公開（公告）號: CN113111055A
• 公開（公告）日: 2021-07-13
• 發明（設計）人: 李丹峰
• 申請（專利權）人: 中國工商銀行股份有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/22;G06F16/23
• 代理公司: 北京三友知識產權代理有限公司 11127
• 代理人: 任默聞;王濤

1.一種數據表的數據清理方法，其特征在于，包括：

建立待清理數據表清單；

根據表清單拆分規則，將所述待清理數據表清單拆分為多個子清單；其中，所述表清單拆分規則是預設的；

遍歷各個子清單，基于數據清理規則對每個數據表的分區進行篩選，獲得分區清單；其中，所述數據清理規則是預設的；

基于所述分區清單生成清理腳本，并執行所述清理腳本完成數據清理。

2.根據權利要求1所述的方法，其特征在于，所述表清單拆分規則包括：

基于所述待清理數據表清單對應的數據表的總數量和預設子清單數量對所述待清理數據表清單按照所述預設子清單數量進行均勻拆分；或者

基于所述待清理數據表清單對應的數據表的總數量和各個數據表的大小對所述待清理數據表清單進行綜合拆分，使每個子清單對應的數據表的數量小于第一閾值且每個子清單對應的數據表的總大小小于第二閾值。

3.根據權利要求1所述的方法，其特征在于，所述遍歷各個子清單，基于數據清理規則對每個數據表的分區進行篩選包括：

并發遍歷各個子清單，基于數據清理規則對每個數據表的分區進行篩選。

4.根據權利要求1所述的方法，其特征在于，所述數據清理規則包括：

對預設分區段內的數據進行清理。

5.根據權利要求1所述的方法，其特征在于，所述基于所述分區清單生成清理腳本包括：

根據數據保留條件更新所述分區清單；其中，所述保留條件是預設的；

根據更新后的分區清單生成清理腳本。

6.根據權利要求1至5任一項所述的方法，其特征在于，所述基于所述分區清單生成清理腳本包括：

根據所述分區清單生成多個清理子腳本，每個子腳本包括不超過預設數量條清理語句。

7.根據權利要求6所述的方法，其特征在于，所述執行所述清理腳本完成數據清理包括：

并發執行各個清理子腳本完成數據清理。

8.一種數據表的數據清理裝置，其特征在于，包括：

建立模塊，用于建立待清理數據表清單；

拆分模塊，用于根據表清單拆分規則，將所述待清理數據表清單拆分為多個子清單；其中，所述表清單拆分規則是預設的；

遍歷模塊，用于遍歷各個子清單，基于數據清理規則對每個數據表的分區進行篩選，獲得分區清單；其中，所述數據清理規則是預設的；

清理模塊，用于基于所述分區清單生成清理腳本，并執行所述清理腳本完成數據清理。

9.一種電子設備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，其特征在于，所述處理器執行所述計算機程序時實現權利要求1至7任一項所述方法的步驟。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現權利要求1至7任一項所述方法的步驟。