[發明專利]向維度表里導入數據的方法和裝置

在審

• 申請號: 201310541634.3
• 申請日: 2013-11-05
• 公開（公告）號: CN103559272A
• 公開（公告）日: 2014-02-05
• 發明（設計）人: 洪超
• 申請（專利權）人: 北京國雙科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 吳貴明;張永明

1.一種向維度表里導入數據的方法，其特征在于，包括：

建立目標維度表的唯一索引，其中，所述目標維度表為數據庫中接收數據源數據的維度表；

設置所述目標維度表的唯一索引的屬性為預設屬性，所述預設屬性表示所述數據源數據在所述目標維度表中已存在的情況下，不插入所述數據源數據，并且所述數據庫不報錯；以及

將所述數據源數據導入所述目標維度表中。

2.根據權利要求1所述的向維度表里導入數據的方法，其特征在于，在將所述數據源數據導入所述目標維度表中之前，所述向維度表里導入數據的方法還包括：

檢查所述數據源數據是否存在重復；以及

如果檢查出所述數據源數據存在重復，刪除所述數據源數據的重復部分或從重復的所述數據源數據中選取任一所述數據源數據作為被導入數據。

3.根據權利要求2所述的向維度表里導入數據的方法，其特征在于，將所述數據源數據導入所述目標維度表中包括：

將所述數據源數據導入到所述數據庫的臨時表中；

建立所述臨時表的唯一索引；以及

將所述臨時表中的數據導入到所述目標維度表中。

4.根據權利要求1所述的向維度表里導入數據的方法，其特征在于，在將所述數據源數據導入所述目標維度表中之前，所述向維度表里導入數據的方法還包括：

計算每一個所述數據源數據的映射值，其中，所述映射值的長度小于對應的所述數據源數據的長度。

5.根據權利要求4所述的向維度表里導入數據的方法，其特征在于，所述映射值為哈希值。

6.根據權利要求1所述的向維度表里導入數據的方法，其特征在于，根據所述目標維度表的鍵值建立所述目標維度表的唯一索引。

7.一種向維度表里導入數據的裝置，其特征在于，包括：

建立單元，用于建立目標維度表的唯一索引，其中，所述目標維度表為數據庫中接收數據源數據的維度表；

設置單元，用于設置所述目標維度表的唯一索引的屬性為預設屬性，所述預設屬性表示所述數據源數據在所述目標維度表中已存在的情況下，不插入所述數據源數據，并且所述數據庫不報錯；以及

導入單元，用于將所述數據源數據導入所述目標維度表中。

8.根據權利要求7所述的向維度表里導入數據的裝置，其特征在于，所述向維度表里導入數據的裝置還包括：

檢查單元，用于在將所述數據源數據導入所述目標維度表中之前，檢查所述數據源數據是否存在重復；以及

處理單元，用于在檢查出所述數據源數據存在重復的情況下，刪除所述數據源數據的重復部分或從重復的所述數據源數據中選取任一所述數據源數據作為被導入數據。

9.根據權利要求8所述的向維度表里導入數據的裝置，其特征在于，所述導入單元包括：

第一導入子單元，用于將所述數據源數據導入到所述數據庫的臨時表中；

建立子單元，用于建立所述臨時表的唯一索引；以及

第二導入子單元，用于將所述臨時表中的數據導入到所述目標維度表中。

10.根據權利要求7所述的向維度表里導入數據的裝置，其特征在于，所述向維度表里導入數據的裝置還包括：

計算單元，用于計算每一個所述數據源數據的映射值，其中，所述映射值的長度小于對應的所述數據源數據的長度。

11.根據權利要求10所述的向維度表里導入數據的裝置，其特征在于，計算單元使用哈希算法計算所述映射值。

12.根據權利要求7所述的向維度表里導入數據的裝置，其特征在于，所述建立單元根據所述目標維度表的鍵值建立所述目標維度表的唯一索引。