[發(fā)明專利]一種基于canal和kafka實(shí)現(xiàn)實(shí)時(shí)數(shù)倉(cāng)的系統(tǒng)在審
| 申請(qǐng)?zhí)枺?/td> | 201810877574.5 | 申請(qǐng)日： | 2018-08-03 |
| 公開（公告）號(hào)： | CN109325077A | 公開（公告）日： | 2019-02-12 |
| 發(fā)明（設(shè)計(jì)）人： | 衛(wèi)翀 | 申請(qǐng)（專利權(quán)）人： | 北京馬上慧科技術(shù)有限公司 |
| 主分類號(hào)： | G06F16/28 | 分類號(hào)： | G06F16/28;G06F16/25 |
| 代理公司： | 北京華仲龍騰專利代理事務(wù)所(普通合伙) 11548 | 代理人： | 李靜 |
| 地址： | 100089 北京市海淀區(qū)*** | 國(guó)省代碼： | 北京;11 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 研發(fā) 靈活配置 生產(chǎn)環(huán)境 數(shù)據(jù)倉(cāng)庫(kù) 數(shù)據(jù)接入 統(tǒng)一管理 數(shù)據(jù)處理 數(shù)據(jù)源 易維護(hù) 解耦 寫入 靈活 部署 統(tǒng)一 | ||
1.一種基于canal和kafka實(shí)現(xiàn)實(shí)時(shí)數(shù)倉(cāng)的系統(tǒng)，其特征在于，包括Canal-Server、Canal-Client、Consumer-plugin-man和admin-ods，Canal-Server和Canal-Client相連接，Canal-Client通過kafka與Consumer-plugin-man相連接，admin-ods也與Consumer-plugin-man相連接，所述Consumer-plugin-man與Hbase相連接；所述Hbase連接有ElasticSearch，ElasticSearch連接有Databus-query，Databus-query連接有atabus-api。
2.根據(jù)權(quán)利要求1所述的一種基于canal和kafka實(shí)現(xiàn)實(shí)時(shí)數(shù)倉(cāng)的系統(tǒng)，其特征在于，所述admin-ods通過meta-data與Hbase相連接。
3.根據(jù)權(quán)利要求1所述的一種基于canal和kafka實(shí)現(xiàn)實(shí)時(shí)數(shù)倉(cāng)的系統(tǒng)，其特征在于，所述Consumer-plugin-man通過some rules與ElasticSearch。
4.根據(jù)權(quán)利要求1所述的一種基于canal和kafka實(shí)現(xiàn)實(shí)時(shí)數(shù)倉(cāng)的系統(tǒng)，其特征在于，所述Canal-Server通過binlog changes與Mysql相連接。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于北京馬上慧科技術(shù)有限公司，未經(jīng)北京馬上慧科技術(shù)有限公司許可，擅自商用是侵權(quán)行為。如果您想購(gòu)買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請(qǐng)聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201810877574.5/1.html，轉(zhuǎn)載請(qǐng)聲明來源鉆瓜專利網(wǎng)。
- 數(shù)據(jù)化和數(shù)據(jù)匹配方法和代碼推薦方法及相關(guān)裝置
- 一種基于服務(wù)協(xié)作模式的研發(fā)管理方法和系統(tǒng)
- 基于流程驅(qū)動(dòng)研發(fā)任務(wù)的方法及系統(tǒng)
- 一種研發(fā)工時(shí)計(jì)算方法和裝置
- 一種企業(yè)研發(fā)管理方法及系統(tǒng)
- 產(chǎn)品研發(fā)管理方法、裝置、計(jì)算機(jī)設(shè)備及存儲(chǔ)介質(zhì)
- 軟件研發(fā)管理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)
- 一種研發(fā)試制信息管理方法及系統(tǒng)
- 軟件研發(fā)安全能力動(dòng)態(tài)評(píng)估和提升方法及系統(tǒng)
- 研發(fā)項(xiàng)目資金監(jiān)管系統(tǒng)
- 沼氣生產(chǎn)環(huán)境因子檢測(cè)裝置
- 汽車生產(chǎn)環(huán)境監(jiān)控系統(tǒng)
- 溫室生產(chǎn)環(huán)境監(jiān)測(cè)系統(tǒng)
- 一種獸藥生產(chǎn)環(huán)境遠(yuǎn)程控制系統(tǒng)及方法
- 一種獸藥生產(chǎn)環(huán)境遠(yuǎn)程控制系統(tǒng)
- 運(yùn)行環(huán)境的切換方法和運(yùn)行環(huán)境的切換裝置
- 生產(chǎn)環(huán)境的測(cè)試方法、裝置、計(jì)算設(shè)備以及介質(zhì)
- 生產(chǎn)環(huán)境粉塵監(jiān)控系統(tǒng)
- 一種基于大數(shù)據(jù)的化工生產(chǎn)安全在線監(jiān)測(cè)預(yù)警管理系統(tǒng)
- 數(shù)碼印花車間的生產(chǎn)環(huán)境控制系統(tǒng)、方法和裝置
- 用于進(jìn)行數(shù)據(jù)倉(cāng)儲(chǔ)的設(shè)備和方法
- 用于進(jìn)行數(shù)據(jù)倉(cāng)儲(chǔ)的系統(tǒng)和方法
- 同步構(gòu)建業(yè)務(wù)模型和數(shù)據(jù)倉(cāng)庫(kù)模型及其映射的方法及系統(tǒng)
- 一種構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)表血緣關(guān)系圖的方法和裝置
- 一種數(shù)據(jù)倉(cāng)庫(kù)性能測(cè)試方法及系統(tǒng)
- 一種老年健康監(jiān)護(hù)系統(tǒng)用數(shù)據(jù)及資源存儲(chǔ)層
- 數(shù)據(jù)模型生成方法和數(shù)據(jù)倉(cāng)庫(kù)生成方法、裝置及電子設(shè)備
- 一種解耦合的彈性數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)
- 數(shù)據(jù)同步方法、裝置、存儲(chǔ)介質(zhì)和計(jì)算機(jī)設(shè)備
- 一種數(shù)據(jù)倉(cāng)庫(kù)管理方法及系統(tǒng)
