[發明專利]一種構建優勢性能數據倉庫的方法和裝置

有效

• 申請號: 201910578042.6
• 申請日: 2019-06-28
• 公開（公告）號: CN110442562B
• 公開（公告）日: 2022-02-18
• 發明（設計）人: 馮曉慶
• 申請（專利權）人: 蘇州浪潮智能科技有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21;G06F16/25
• 代理公司: 北京連和連知識產權代理有限公司 11278
• 代理人: 劉小峰

1.一種構建優勢性能數據倉庫的方法，其特征在于，包括以下步驟：

收集集群中系統資源可使用情況并顯示結果；

基于顯示的所述結果選擇數據倉庫的組件和資源，并使用所述組件和資源在底層形成架構組件和資源配置文件；

基于業務場景選擇測試參數對基于所述架構組件和資源配置文件的數據倉庫進行測試并得到測試結果；

響應于所述測試結果大于閾值，使用所述架構組件與所述資源配置文件進行所述數據倉庫的構建。

2.根據權利要求1所述的方法，其特征在于，所述系統資源包括：節點數目、CPU的核數與可使用率、內存的可使用空間、硬盤類型、硬盤數目與容量、網絡帶寬信息。

3.根據權利要求1所述的方法，其特征在于，收集本集群中系統資源可使用情況并顯示結果包括：通過web界面顯示所述結果。

4.根據權利要求1所述的方法，其特征在于，所述組件包括hadoop、spark、hbase、MySQL。

5.根據權利要求1所述的方法，其特征在于，所述資源包括節點數目、CPU要使用的核數、內存分配的使用空間、硬盤使用數目與容量、網絡帶寬選擇。

6.根據權利要求1所述的方法，其特征在于，所述測試參數包括文件讀寫、排序、推薦、查詢、進行模擬測試的數據量級別。

7.根據權利要求1所述的方法，其特征在于，所述測試結果包括吞吐量、完成時間、資源占用。

8.根據權利要求1所述的方法，其特征在于，還包括：響應于所述測試結果不大于閾值，重新選擇所述組件、所述資源和所述參數重新進行測試。

9.一種構建優勢性能數據倉庫的裝置，其特征在于，包括至少一個處理器和存儲器，所述存儲器存儲有處理器可執行指令，所述指令在被執行時實現以下步驟：

收集集群中系統資源可使用情況并顯示結果；

基于顯示的所述結果選擇數據倉庫的組件和資源，并使用所述組件和資源在底層形成架構組件與資源配置文件；

基于業務場景選擇測試參數對基于所述架構組件與資源配置文件的數據倉庫進行測試并得到測試結果；

響應于所述測試結果大于閾值，使用所述架構組件與所述資源配置文件進行所述數據倉庫的構建。

10.根據權利要求9所述的裝置，其特征在于，所述步驟還包括：響應于所述測試結果不大于閾值，重新選擇所述組件、所述資源和所述參數重新進行測試。