[發明專利]用于將數據加載到時態數據倉庫的方法和系統

有效

• 申請號: 201280017308.6
• 申請日: 2012-03-02
• 公開（公告）號: CN103460208B
• 公開（公告）日: 2017-04-05
• 發明（設計）人: I·A·約翰遜
• 申請（專利權）人: 波音公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京紀凱知識產權代理有限公司11245
• 代理人: 趙蓉民

1.一種用于將進入數據集加載到時態數據倉庫的系統（10），所述系統包含：

存儲裝置（720），所述存儲裝置（720）包括時態數據倉庫和進入數據集；以及

處理器單元（710），所述處理器單元（710）耦合到所述存儲裝置并且經編程：

將所述進入數據集劃分為包括第一分區和第二分區的多個分區，其中所述多個分區中的每個分區包括多個數據記錄；

將所述第一分區輸入到預加載表；

將所述第二分區輸入到所述預加載表；以及

將所述預加載表應用到所述時態數據倉庫。

2.根據權利要求1所述的系統（10），其中所述處理器單元（710）經編程至少部分通過將哈希函數應用到與至少一個數據記錄關聯的主關鍵字以便產生對應于所述至少一個數據記錄的哈希值，從而將所述進入數據集劃分為所述多個分區。

3.根據權利要求1所述的系統（10），其中所述處理器單元（710）經進一步編程在所述第一分區被預加載到所述表之后，將所述第二分區輸入到所述預加載表。

4.根據權利要求1所述的系統（10），其中所述處理器單元（710）經進一步編程在所述第一分區被輸入到所述預加載表時，將所述第二分區輸入到所述預加載表。

5.根據權利要求4所述的系統（10），其中所述處理器單元（710）經編程基于確定并行輸入的當前量小于并行輸入的預定最大量，在所述第一分區被輸入到所述預加載表時將所述第二分區輸入到所述預加載表。

6.根據權利要求1所述的系統（10），其中所述處理器單元（710）經編程至少部分通過以下措施輸入所述第一分區和所述第二分區中的至少一個：

所述分區的所述數據記錄到對應于所述分區的可變表的輸入；以及

源自所述可變表的所述數據記錄到所述預加載表的復制。

7.根據權利要求1所述的系統（10），其中所述處理器單元（710）經進一步編程：

在所述第一分區中識別包括除時間戳之外的多個字段的數據記錄，所述多個字段等于先前輸入的數據記錄的多個非關鍵字段；

在將所述第一分區輸入到所述預加載表時，排除已識別的數據記錄。

8.根據權利要求1所述的系統（10），其中所述進入數據包括源自源數據庫（20）的數據的快照，并且所述處理器單元（710）經進一步編程：

檢測在時態數據倉庫中的有效數據記錄不與在所述進入數據集中的數據記錄關聯；以及

基于所述檢測執行所述有效數據記錄的隱式刪除。

9.根據權利要求8所述的系統（10），其中所述處理器單元（710）經進一步編程：

確定與在所述進入數據集中的第一數據記錄關聯的最早源時間戳；以及

識別表示以下內容的一主關鍵字組：

與剛好在所述最早源時間戳之前的源時間戳關聯的在所述時態數據倉庫中的數據記錄；以及

與比最早源時間戳晚的源時間戳關聯的在所述時態數據倉庫中的一個或更多數據記錄；以及

基于已識別的主關鍵字組輸入所述第一分區和所述第二分區。

10.一種用于將多個數據記錄加載到時態數據倉庫的方法，所述方法包含：

由計算裝置（700）將所述數據記錄劃分為包括第一分區和第二分區的多個分區；

由所述計算裝置將所述第一分區輸入到預加載表；

由所述計算裝置將所述第二分區輸入到所述預加載表；以及

由所述計算裝置將所述預加載表應用到所述時態數據倉庫。

11.根據權利要求10所述的方法，其中所述第一分區和所述第二分區被并行輸入。

12.根據權利要求10所述的方法，進一步包含確定并行輸入的當前量小于并行輸入的預定最大量，其中基于所述確定將所述第一分區和所述第二分區并行輸入。

13.根據權利要求10所述的方法，進一步包含確定并行輸入的當前量大于或等于并行輸入的預定最大量，其中基于所述確定將所述第一分區和所述第二分區循序輸入。