[發明專利]一種數據管理方法及其裝置在審
| 申請號: | 201710845879.3 | 申請日: | 2017-09-19 |
| 公開(公告)號: | CN107590251A | 公開(公告)日: | 2018-01-16 |
| 發明(設計)人: | 金洪殿 | 申請(專利權)人: | 鄭州云海信息技術有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 北京安信方達知識產權代理有限公司11262 | 代理人: | 李紅爽,李丹 |
| 地址: | 450018 河南省鄭州市*** | 國省代碼: | 河南;41 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據管理 方法 及其 裝置 | ||
1.一種數據管理方法,其特征在于,包括:
獲取至少兩種類型數據中的相關數據,所述相關數據之間存在至少一個相同的字段;
對所述相關數據進行處理,將處理后獲得的數據文件存儲到數據庫HBase;
根據所述數據文件,建立所述數據文件與搜索服務器ES的映射關系,以使通過所述ES獲取存儲在所述HBase中的所述數據文件。
2.根據權利要求1所述的方法,其特征在于,所述根據所述數據文件,建立所述數據文件與ES的映射關系,包括:
將所述HBase中所述數據文件的索引標識存儲到ES,所述索引標識至少包括在所述HBase中所述數據文件的主鍵。
3.根據權利要求2所述的方法,其特征在于,所述對所述相關數據進行處理,將處理后獲得的數據文件存儲到數據庫HBase,包括:
將所述相關數據進行處理,獲得可擴展標記語言Xml格式的數據文件;
根據所述Xml格式的數據文件,將所述Xml格式的數據文件存儲到所述Hbase。
4.根據權利要求1-3任一項所述的方法,其特征在于,所述根據所述數據文件,建立所述數據文件與ES的映射關系之后,還包括:
獲取搜索信息,所述搜索信息用于獲取所述HBase中的所述數據文件;
根據所述搜索信息,獲取通過ES確定的所述數據文件。
5.根據權利要求4所述的方法,其特征在于,所述獲取至少兩種類型數據中的相關數據,包括:
通過數據同步工具,獲取至少兩個數據庫中所述至少兩種類型數據的相關數據。
6.一種數據管理裝置,其特征在于,包括:
獲取模塊,用于獲取至少兩種類型數據中的相關數據,所述相關數據之間存在至少一個相同的字段;
存儲模塊,用于對所述相關數據進行處理,將處理后獲得的數據文件存儲到數據庫HBase;
處理模塊,用于根據所述數據文件,建立所述數據文件與搜索服務器ES的映射關系,以使通過所述ES獲取存儲在所述HBase中的所述數據文件。
7.根據權利要求6所述的裝置,其特征在于,所述處理模塊,用于將所述HBase中所述數據文件的索引標識存儲到ES,所述索引標識至少包括在所述HBase中所述數據文件的主鍵。
8.根據權利要求7所述的裝置,其特征在于,所述存儲模塊,用于將所述相關數據進行處理,獲得可擴展標記語言Xml格式的數據文件;根據所述Xml格式的數據文件,將所述Xml格式的數據文件存儲到所述Hbase。
9.根據權利要求6-8任一項所述的裝置,其特征在于,所述獲取模塊,還用于獲取搜索信息,所述搜索信息用于獲取所述HBase中的所述數據文件;根據所述搜索信息,獲取通過ES確定的所述數據文件。
10.根據權利要求9所述的裝置,其特征在于,所述獲取模塊,用于通過數據同步工具,獲取至少兩個數據庫中所述至少兩種類型數據的相關數據。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于鄭州云海信息技術有限公司,未經鄭州云海信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710845879.3/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種冷加工設備主軸箱的防滲入的工裝
- 下一篇:一種普通車床的改進型多功能鏜床





