[發明專利]一種數據倉庫的構建方法、系統及服務器

在審

• 申請號: 201710009996.6
• 申請日: 2017-01-06
• 公開（公告）號: CN108280084A
• 公開（公告）日: 2018-07-13
• 發明（設計）人: 董林
• 申請（專利權）人: 上海前隆信息科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 上海光華專利事務所(普通合伙) 31219
• 代理人: 龐紅芳

本發明提供一種數據倉庫的構建方法、系統及服務器，所述方法包括：構建多層數據處理架構將數據分層處理；從數據源抽取所需的數據并將抽取的數據清洗成符合預設要求的數據；對數據處理任務進行調度和監管；對多層數據處理架構中的數據的訪問權限進行控制并對數據的整體運行狀況進行監管；所述多層數據處理架構包括：臨時存儲從所述數據源獲取的數據的臨時存儲層、對清洗后的數據進行存儲和處理的核心數據層、將數據進行組織形成對應數據主題的數據集市層以及面向用戶處理用戶輸入的具體需求數據的應用層。本發明可以快速構建企業數據倉庫，降低倉庫構建的復雜度，縮短企業搭建數據倉庫的開發周期，減少倉庫開發、運維成本，具有廣泛的應用前景。

技術領域

本發明涉及計算機軟件技術領域，具體為一種數據倉庫的構建方法、系統及服務器。

背景技術

數據倉庫，英文名稱為Data Warehouse，可簡寫為DW或DWH。數據倉庫，是為企業所有級別的決策制定過程，提供所有類型數據支持的戰略集合。它是單個數據存儲，出于分析性報告和決策支持目的而創建。為需要業務智能的企業，提供指導業務流程改進、監視時間、成本、質量以及控制。

數據倉庫是決策支持系統(dss)和聯機分析應用數據源的結構化數據環境。數據倉庫研究和解決從數據庫中獲取信息的問題。數據倉庫的特征在于面向主題、集成性、穩定性和時變性。

數據倉庫，由數據倉庫之父比爾·恩門(Bill Inmon)于1990年提出，主要功能仍是將組織透過資訊系統之聯機事務處理(OLTP)經年累月所累積的大量資料，透過數據倉庫理論所特有的資料儲存架構，作一有系統的分析整理，以利各種分析方法如聯機分析處理(OLAP)、數據挖掘(Data Mining)之進行，并進而支持如決策支持系統(DSS)、主管資訊系統(EIS)之創建，幫助決策者能快速有效的自大量資料中，分析出有價值的資訊，以利決策擬定及快速回應外在環境變動，幫助建構商業智能(BI)。

數據倉庫是一個為企業決策者提供數據分析處理的集成、統一的數據平臺；其主要用于支持經營管理中的，數據分析、決策支持、數據挖掘、業務報表等；數據倉庫的目的是建立一種體系結構化的數據存儲環境，將分析決策所需要的大量數據從傳統的操作環境中分離出來，使分散、不一致的操作數據轉換為集成、統一的信息。主要有以下特點：

數據倉庫中的數據是在對原有分散的數據庫數據抽取、清理的基礎上經過系統加工、匯總和整理得到的，必須消除源數據中的不一致性，以保證數據倉庫內的信息是關于整個企業的一致的全局信息。

數據倉庫的數據主要供企業決策分析之用，所涉及的數據操作主要是數據查詢，一旦某個數據進入數據倉庫以后，一般情況下將被長期保留，也就是數據倉庫中一般有大量的查詢操作，但修改和刪除操作很少，通常只需要定期的加載、刷新。

數據倉庫中的數據通常包含歷史信息，系統記錄了企業從過去某一時點(如開始應用數據倉庫的時點)到當前的各個階段的信息，通過這些信息，可以對企業的發展歷程和未來趨勢做出定量分析和預測。

信息技術與數據智能大環境下，數據倉庫在軟硬件領域、Internet和企業內部網解決方案以及數據庫方面提供了許多經濟高效的計算資源，可以保存極大量的數據供分析使用，且允許使用多種數據訪問技術。

近年來，隨著互聯網行業的快速發展，越來越多的企業出于對業務發展和風險控制的需要都急需建立一套自己的數據倉庫供決策分析、模型訓練使用。互聯網與傳統企業數據的差異：