[發明專利]基于數據倉庫的數據處理系統和方法

無效

• 申請號: 201310101244.4
• 申請日: 2013-03-27
• 公開（公告）號: CN103218415A
• 公開（公告）日: 2013-07-24
• 發明（設計）人: 白冬立;喬萬里;黃建;張麗麗;張巖;魏來;馬小珩;潘飛
• 申請（專利權）人: 互愛互動(北京)科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京東方億思知識產權代理有限責任公司 11258
• 代理人: 李曉冬

1.一種基于數據倉庫的數據處理系統，該系統包括：

臨時數據模型建立單元，被配置為根據用戶輸入動態地建立臨時數據模型；

篩選收集單元，被配置為根據所述臨時數據模型從所述數據倉庫中篩選并收集數據；以及

加載單元，被配置為將篩選出的數據加載到擴展存儲系統中。

2.如權利要求1所述的數據處理系統，其中，所述擴展存儲系統包括加速存儲數據庫。

3.如權利要求2所述的數據處理系統，其中，如果所述所篩選出的數據的量大于閾值和/或需要多表關聯查詢，則將所述所篩選出的數據加載到所述加速存儲數據庫中。

4.如權利要求1所述的數據處理系統，其中，所述擴展存儲系統包括功能擴展數據庫。

5.如權利要求4所述的數據處理系統，其中，所述功能擴展數據庫對所述所篩選出的數據進行高級統計函數處理。

6.如權利要求2所述的數據處理系統，其中，所述加速存儲數據庫包括列式存儲數據庫。

7.如權利要求6所述的數據處理系統，其中，所述列式存儲數據庫是Infobright存儲引擎。

8.如權利要求4所述的數據處理系統，其中，所述功能擴展數據庫包括關系數據庫。

9.如權利要求8所述的數據處理系統，其中，所述關系數據庫是PostgreSQL數據庫。

10.如權利要求1所述的數據處理系統，還包括：分析計算單元，被配置為根據用戶查詢范圍，在所述擴展存儲系統中對所述篩選出的數據執行分析和計算處理并輸出處理結果。

11.如權利要求10所述的數據處理系統，其中，所述分析和計算處理包括合并匯總處理，用于對所述篩選出的數據進行匯總和統計。

12.如權利要求1所述的數據處理系統，其中，所述加載單元還被配置為根據所述擴展存儲系統的存儲結構來對所述篩選出的數據進行格式轉換。

13.如權利要求1所述的數據處理系統，其中，所述數據倉庫基于篩選收集和合并匯總集群存儲和計算。

14.如權利要求10所述的數據處理系統，還包括報表輸出單元，被配置為以表格、圖表格式輸出所述處理結果。

15.如權利要求1所述的數據處理系統，其中，所述臨時數據模型包括一個或多個用戶查詢項和與查詢項相關聯的一個或多個限定條件。

16.一種基于數據倉庫的數據處理方法，該方法包括：

臨時數據模型建立步驟，用于根據用戶輸入動態地建立臨時數據模型；

篩選收集步驟，用于根據所述臨時數據模型從所述數據倉庫中篩選并收集數據；以及

加載步驟，用于將篩選出的數據加載到擴展存儲系統中。

17.如權利要求16所述的數據處理方法，其中，所述擴展存儲系統包括加速存儲數據庫。

18.如權利要求17所述的數據處理方法，其中，如果所述所篩選出的數據的量大于閾值和/或需要多表關聯查詢，則將所述所篩選出的數據加載到所述加速存儲數據庫中。

19.如權利要求16所述的數據處理方法，其中，所述擴展存儲系統包括功能擴展數據庫。

20.如權利要求19所述的數據處理方法，其中，所述功能擴展數據庫對所述所篩選出的數據進行高級統計函數處理。

21.如權利要求17所述的數據處理方法，其中，所述加速存儲數據庫包括列式存儲數據庫。

22.如權利要求21所述的數據處理方法，其中，所述列式存儲數據庫是Infobright存儲引擎。

23.如權利要求19所述的數據處理方法，其中，所述功能擴展數據庫包括關系數據庫。

24.如權利要求23所述的數據處理方法，其中，所述關系數據庫是PostgreSQL數據庫。

25.如權利要求16所述的數據處理方法，還包括：根據用戶查詢范圍，在所述擴展存儲系統中對所述篩選出的數據執行分析和計算處理并輸出處理結果。