[發明專利]一種數據倉庫的同步系統及其方法在審
| 申請號: | 202010759826.1 | 申請日: | 2020-07-31 |
| 公開(公告)號: | CN114064666A | 公開(公告)日: | 2022-02-18 |
| 發明(設計)人: | 王琪 | 申請(專利權)人: | 上海曉信信息科技有限公司 |
| 主分類號: | G06F16/23 | 分類號: | G06F16/23;G06F16/21;G06F16/2458;G06F16/27 |
| 代理公司: | 上海宏京知識產權代理事務所(普通合伙) 31297 | 代理人: | 何艷娥 |
| 地址: | 200092 上海市楊*** | 國省代碼: | 上海;31 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據倉庫 同步 系統 及其 方法 | ||
1.一種數據倉庫的同步方法,其特征在于,所述方法包括:
監聽數據倉庫的入口;
若檢測到針對第一數據的操作,則提取所述第一數據對應的識別信息;所述第一數據為所述數據倉庫中的任一數據;
使用所述識別信息去多個數據倉庫查詢,獲取更新后的所述第一數據,記為第二數據;
將所述第二數據進行聚合、變形,獲得第三數據;
將所述第三數據存儲到目標倉庫中。
2.根據權利要求1所述的數據倉庫的同步方法,其特征在于,所述提取所述第一數據對應的識別信息之后,使用所述識別信息去多個數據倉庫查詢之前,還包括:
等待預設時間,若預設時間內再次收到相同識別信息,則進行去重。
3.根據權利要求1所述的數據倉庫的同步方法,其特征在于,將所述第二數據進行聚合包括:將每個數據倉庫提供的字段信息進行合并,形成一條完整的數據。
4.根據權利要求4所述的數據倉庫的同步方法,其特征在于,將所述第二數據進行變形包括:將合并后的完整數據的字段名稱根據配置文件,轉換成目標倉庫的表結構中的字段名稱。
5.根據權利要求4所述的數據倉庫的同步方法,其特征在于,將所述第二數據進行聚合之前包括:由所述配置文件決定每一個數據倉庫提供的字段的信息,以及所提供的字段的信息與目標倉庫的表結構中的字段的對應關系。
6.根據權利要求1所述的數據倉庫的同步方法,其特征在于,將所述第三數據存儲到目標倉庫中,具體包括:
當所述針對所述第一數據的操作為插入或更新操作時,則為所述第三數據添加標志字段,并存入目標倉庫;
當所述針對所述第一數據的操作為刪除操作時,則為所述第三數據添加標志字段,并存入目標倉庫;
其中,所述標志字段表征操作的類型。
7.根據權利要求6所述的數據倉庫的同步方法,其特征在于,所述標志字段通過數字表征操作的次數。
8.一種數據倉庫的同步系統,其特征在于,所述系統包括:
數據來源模塊:用于監聽數據倉庫的入口;
數據處理模塊:用于檢測針對第一數據操作發生的變化,若檢測到變化則提取所述第一數據對應的識別信息;所述第一數據為所述數據倉庫中的任一數據;
使用所述識別信息去多個數據倉庫查詢,獲取更新后的所述第一數據,記為第二數據;將所述第二數據進行聚合、變形,獲得第三數據;
數據存儲模塊:用于將所述第三數據存儲到目標倉庫中。
9.一種存儲介質,其上存儲有計算機程序,其特征在于,該程序被處理器執行時實現權利要求1-7中任意一項所述的方法。
10.一種電子設備,包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序,其特征在于:所述處理器執行所述程序時實現權利要求1-7中任意一項所述的方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于上海曉信信息科技有限公司,未經上海曉信信息科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202010759826.1/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:可撈式防落物器及使用該防落物器的防落物裝置
- 下一篇:一種拉力試驗機





