[發明專利]一種應用數據空間使用估算方法

有效

• 申請號: 201510296750.2
• 申請日: 2015-06-03
• 公開（公告）號: CN104881477B
• 公開（公告）日: 2018-09-21
• 發明（設計）人: 程永新;宋輝;陳波
• 申請（專利權）人: 上海新炬網絡信息技術股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 上海科律專利代理事務所(特殊普通合伙) 31290
• 代理人: 袁亞軍;金碎平

本發明公開了一種應用數據空間使用估算方法，包括如下步驟：a)集中配置被監控主機的數據存儲信息以及采集規則；b)根據配置信息采用統一時間和格式采集相關元數據；c)根據采集到的元數據統計被監控主機的數據空間使用消耗情況，并結合業務增長趨勢和各類數據表的生命周期估算數據空間擴容計劃；d)對元數據進行壓縮歸檔，并根據配置的離線時間下線較早部分的元數據；對結果數據歸檔用作報表展示與歷史趨勢分析。本發明提供的應用數據空間使用估算方法，通過采集監控數據存儲使用情況，準確地結合業務數據量增長趨勢以及數據表生命周期成功實現對數據空間使用率與擴容計劃的精確控制，大大降低故障發生率和管理成本，提高系統的穩定性。

技術領域

本發明涉及一種數據存儲處理方法，尤其涉及一種應用數據空間使用估算方法。

背景技術

應用系統從設計、開發、測試直至上線都伴隨著數據的產生、使用與消亡，離開了數據應用系統就像是沒有車輪的車架寸步難行。目前大型企業數據主要存放于數據庫中，應用系統通過對數據的讀、寫、完成業務流程。隨著業務系統的運行，數據不斷的產生，數據使用的空間也隨之增長，同時也帶來了性能與空間的雙重問題，久而久之應用系統運行緩慢，在業務高峰時甚至會遇到系統中斷的異常情況。目前通過對數據庫、存儲空間使用監控及時提醒空間使用情況，在告警后通過以下兩種方法解決：1、存儲空間擴容。2、尋找空間占用較大的數據表，與維護部門確認并清理數據。

現有的方法一：通過存儲空間擴容可以解決長期的空間問題，但是一旦已有空間耗盡后就啟動存儲空間的擴容將會導致應用系統數據庫容量無上限的增長，同時會帶來較大的性能問題。存儲空間也是有限的，不合理的空間擴容將帶來成本的大幅增加，并且擴容申請的流程較長及時性低。

現有的方法二：通過空間使用率監控告警后，篩選空間占用較高的數據表與維護部門確認清理，可以解決短期的空間問題，但是清理力度有限，問題經常反反復復需要消耗大量的人力且效果不明顯，甚至出現在數據清理后非維護部門投訴數據被清理的情況。

由上可見，以上兩種方法存在資源與成本較高、資源擴容不及時等缺點。

發明內容

本發明所要解決的技術問題是提供一種應用數據空間使用估算方法，能夠結合業務數據量增長趨勢成功實現對數據空間使用率與擴容計劃的精確控制，大大降低故障發生率和管理成本，提高系統的穩定性。

本發明為解決上述技術問題而采用的技術方案是提供一種應用數據空間使用估算方法，包括如下步驟：a)集中配置被監控主機的數據存儲信息以及采集規則；b)根據配置信息采用統一時間和格式采集相關元數據；c)根據采集到的元數據統計被監控主機的數據空間使用消耗情況，并結合業務增長趨勢和各類數據表的生命周期估算數據空間擴容計劃；d)對元數據進行壓縮歸檔，并根據配置的離線時間下線較早部分的元數據；對結果數據歸檔用作報表展示與歷史趨勢分析。

上述的應用數據空間使用估算方法，其中，所述步驟a)中的采集規則包括設置采集時間點、采集間隔、采集監控項和采集格式；所述被監控主機的數據存儲信息包括各類數據表的生命周期及其所屬的業務模塊，各類數據表所屬的業務類型及等級，以及各類數據表所屬存儲器的型號、總容量。

上述的應用數據空間使用估算方法，其中，所述采集監控項包括主機存儲空間使用量和數據庫空間使用量，所述步驟b)定時獲取被監控主機在采集時間點的數據庫空間使用總量、數據庫空間空閑總量以及數據庫表空間占用數量。

上述的應用數據空間使用估算方法，其中，所述步驟c)分別計算統計當月具有生命周期業務數據所占空間以及當月其他數據所占空間，并根據上月具有生命周期業務數據所占空間以及上月其他數據所占空間，分別確定周期性業務數據和其他數據每月占用空間的凈增長值；對于周期性業務數據，結合本月業務變化量以及上月凈增長值估算擴容需求，對于其他數據，如果占有空間超出預定閥值，進行異常報警處理。