[發明專利]數據生命周期管理方法和裝置

在審

• 申請號: 202011359475.1
• 申請日: 2020-11-27
• 公開（公告）號: CN112365244A
• 公開（公告）日: 2021-02-12
• 發明（設計）人: 周統漢;覃嬈;孫朝輝;崖飛虎
• 申請（專利權）人: 深圳前海微眾銀行股份有限公司
• 主分類號: G06Q10/10
• 分類號: G06Q10/10;G06F16/22;G06F16/28
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 張娜;臧建明

本申請實施例提供一種數據生命周期管理方法和裝置。該方法包括：第一設備基于一個數據表的訪問情況，計算數據表的數據活躍時長；第一設備在數據表的創建時長大于數據活躍時長時，基于數據表的類型，確定目標處理策略；第一設備按照目標處理策略對數據表進行數據生命周期管理。從而，減少了人工干預的操作，提高了數據生命周期管理的處理效率，確保了數據歸檔或數據清理的安全性，減輕了企業存儲的成本壓力。

技術領域

本申請實施例涉及計算機技術領域，尤其涉及一種數據生命周期管理方法和裝置。

背景技術

在金融科技(Fintech)領域中，隨著業務的快速發展，數據的規模急劇膨脹。通常，數據庫/數據集群中存放著大量的臨時表、無效中間表等數據表，且這些數據集中存儲在高端存儲設備中，占用了大量的存儲資源和計算資源，導致擴容帶來的投資成本不斷地上升。為了合理配置存儲資源，提高系統資源使用效率，需要進行數據生命周期管理。

針對任意一個數據表，在數據的整個生命周期中，處于不同階段的數據，其性能、可用性、保存要求也不一樣。一般情況下，數據的建立初期，數據的使用頻率較高，需要使用高速存儲，確保數據的高可用性。數據的建立中期，數據的重要性會逐漸降低，使用頻率會隨之下降，應將數據進行不同級別的存儲，為其提供適當的可用性和存儲空間，以降低數據的管理成本和資源開銷。數據的建立后期，大部分的數據將不再會被使用，應將數據進行清理后歸檔保存，以備臨時需要時使用，或者應將數據進行刪除。

然而，開發人員常常基于自身對數據的理解，在數據上線前制定數據生命周期管理對應的處理策略，設定登記數據保留期限，后續再根據該保留期限進行數據的歸檔或銷毀，容易引起數據保留期限存在主觀評估誤差，導致數據生命周期管理存在誤刪風險或者冗余存儲現象。

發明內容

本申請實施例提供一種數據生命周期管理方法和裝置，可準確地推薦數據表的數據活躍時長，以及自動化地推薦具體的數據生命周期管理，智能化的實現了數據表數據生命周期管理過程，確保了數據的安全性能，降低了企業存儲數據的成本壓力。

第一方面，本申請實施例提供一種數據生命周期管理方法。

該方法包括：第一設備基于一個數據表的訪問情況，計算數據表的數據活躍時長；第一設備在數據表的創建時長大于數據活躍時長時，基于數據表的類型，確定目標處理策略；第一設備按照目標處理策略對數據表進行數據生命周期管理。

通過第一方面提供的方法，第一設備結合一個數據表的訪問情況，可計算出該數據表的數據活躍時長，實現了數據活躍時長的精確推薦。在該數據表的創建時長大于該數據表的數據活躍時長時，第一設備可確定出該數據表需要進行數據生命周期管理。第一設備基于該數據表的類型，可確定出目標處理策略，精準地評估了該數據表是需要數據歸檔還是數據清理。從而，第一設備可按照目標處理策略，智能化地對該數據表進行自動化的數據生命周期管理，減少了人工干預的操作，提高了數據生命周期管理的處理效率，確保了數據歸檔或數據清理的安全性，減輕了企業存儲的成本壓力。

在一種可能的設計中，第一設備基于一個數據表的訪問情況，計算數據表的數據活躍時長，包括：

第一設備獲取數據表的創建時長，以及數據表中每個分區表的創建時長和最近訪問時刻；第一設備在數據表的創建時長大于預設時長時，將每個分區表的創建時長和最近訪問時刻之間的差值確定為差值序列；第一設備對差值序列進行密度聚類處理，得到多個核心點，每個核心點用于表示數據表中同一類型的分區表的訪問時長；第一設備計算出多個核心點中的最大核心點對應的最大邊界點，最大邊界點用于表示數據表中全部類型的分區表的最大訪問時長；第一設備確定最大邊界點為數據活躍時長。