[發(fā)明專利]基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法、裝置和系統(tǒng)在審
| 申請(qǐng)?zhí)枺?/td> | 201911271462.6 | 申請(qǐng)日: | 2019-12-12 |
| 公開(公告)號(hào): | CN111190766A | 公開(公告)日: | 2020-05-22 |
| 發(fā)明(設(shè)計(jì))人: | 黃建庭;宋榮鑫;肖衛(wèi)渭;曹德高 | 申請(qǐng)(專利權(quán))人: | 北京淇瑀信息科技有限公司 |
| 主分類號(hào): | G06F11/14 | 分類號(hào): | G06F11/14 |
| 代理公司: | 北京清誠知識(shí)產(chǎn)權(quán)代理有限公司 11691 | 代理人: | 李博 |
| 地址: | 100012 北京市朝陽*** | 國省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 基于 hbase 數(shù)據(jù)庫 機(jī)房 集群 方法 裝置 系統(tǒng) | ||
1.一種基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法,其特征在于,方法包括:
前端將消息寫入主集群服務(wù)器;
前端將消息發(fā)送到消息中間件集群,消費(fèi)功能模塊讀取消息中間件集群中的消息,消費(fèi)功能模塊將消息寫入從集群服務(wù)器;
前端從所述主集群服務(wù)器中讀取狀態(tài),如果狀態(tài)讀取失敗,則前端將消息寫入從集群服務(wù)器,前端將消息發(fā)送到消息中間件集群,消費(fèi)功能模塊讀取消息中間件集群中的消息,消費(fèi)功能模塊將消息寫入主集群服務(wù)器。
2.如權(quán)利要求1所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法,其特征在于,同時(shí)前端將消息發(fā)送到消息中間件集群還包括:判斷所述消息是否成功發(fā)送到消息中間件集群,如果發(fā)送失敗則將消息發(fā)送至中轉(zhuǎn)路由,等待一定時(shí)間后中轉(zhuǎn)路由將所述消息補(bǔ)發(fā)給所述消息中間件集群。
3.如權(quán)利要求1-2任一項(xiàng)所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法,其特征在于,還包括:
設(shè)置補(bǔ)發(fā)次數(shù)閾值;
如果所述中轉(zhuǎn)路由補(bǔ)發(fā)消息給所述消息中間件集群成功,則所述補(bǔ)發(fā)次數(shù)清零;
如果所述中轉(zhuǎn)路由補(bǔ)發(fā)消息給所述消息中間件集群失敗則補(bǔ)發(fā)次數(shù)加1,當(dāng)所述補(bǔ)發(fā)次數(shù)超過閾值時(shí),所述前端停止向所述消息中間件集群發(fā)送消息,所述主集群服務(wù)器定期同步數(shù)據(jù)到從集群服務(wù)器,覆蓋從集群服務(wù)器原有數(shù)據(jù)。
4.如權(quán)利要求1-3任一項(xiàng)所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法,其特征在于,方法還包括:主集群服務(wù)器定期與從集群服務(wù)器進(jìn)行數(shù)據(jù)比對(duì)和校驗(yàn)。
5.如權(quán)利要求1-4任一項(xiàng)所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法,其特征在于,所述消息中間件集群包括kafka、rabbitmq和Rocketmq。
6.如權(quán)利要求1-5任一項(xiàng)所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法,其特征在于,前端將消息發(fā)送到消息中間件集群包括,采用異步的方式將消息透傳到消息中間件集群。
7.如權(quán)利要求1-6任一項(xiàng)所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法,其特征在于,所述中轉(zhuǎn)路由為Mongos路由。
8.一種基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)裝置,其特征在于,裝置包括:
主集群服務(wù)器寫入模塊,用于使前端將消息寫入主集群服務(wù)器;
從集群服務(wù)器寫入模塊,用于使前端將消息發(fā)送到消息中間件集群,消費(fèi)功能模塊讀取消息中間件集群中的消息,消費(fèi)功能模塊將消息寫入從集群服務(wù)器;
主從切換模塊,前端從所述主集群服務(wù)器中讀取狀態(tài),如果狀態(tài)讀取失敗,則前端將消息寫入從集群服務(wù)器,前端將消息發(fā)送到消息中間件集群,消費(fèi)功能模塊讀取消息中間件集群中的消息,消費(fèi)功能模塊將消息寫入主集群服務(wù)器。
9.一種基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)系統(tǒng),其特征在于,包括:
存儲(chǔ)單元,用于存儲(chǔ)計(jì)算機(jī)可執(zhí)行程序;
處理單元,用于讀取所述存儲(chǔ)單元中的計(jì)算機(jī)可執(zhí)行程序,以執(zhí)行權(quán)利要求1至7中任一項(xiàng)所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法。
10.一種計(jì)算機(jī)可讀介質(zhì),用于存儲(chǔ)計(jì)算機(jī)可讀程序,其特征在于,所述計(jì)算機(jī)可讀程序用于執(zhí)行權(quán)利要求1至7中任一項(xiàng)所述的基于HBase數(shù)據(jù)庫的跨機(jī)房集群的容災(zāi)方法。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于北京淇瑀信息科技有限公司,未經(jīng)北京淇瑀信息科技有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201911271462.6/1.html,轉(zhuǎn)載請(qǐng)聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F11-00 錯(cuò)誤檢測;錯(cuò)誤校正;監(jiān)控
G06F11-07 .響應(yīng)錯(cuò)誤的產(chǎn)生,例如,容錯(cuò)
G06F11-22 .在準(zhǔn)備運(yùn)算或者在空閑時(shí)間期間內(nèi),通過測試作故障硬件的檢測或定位
G06F11-28 .借助于檢驗(yàn)標(biāo)準(zhǔn)程序或通過處理作錯(cuò)誤檢測、錯(cuò)誤校正或監(jiān)控
G06F11-30 .監(jiān)控
G06F11-36 .通過軟件的測試或調(diào)試防止錯(cuò)誤
- 一種基于thrift服務(wù)的HBase安全插件
- 一種實(shí)現(xiàn)Windows下連接控制Hbase的方法及裝置
- 一種基于大數(shù)據(jù)的數(shù)據(jù)脫敏方法和Hbase脫敏處理系統(tǒng)
- 多個(gè)集群數(shù)據(jù)一致性的控制方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)
- HBase數(shù)據(jù)遷移方法及遷移裝置
- 基于phoenix改造hbase舊系統(tǒng)的索引同步方法、裝置及系統(tǒng)
- 一種格式化HBase數(shù)據(jù)的方法
- 一種多HBase集群訪問方法、裝置及存儲(chǔ)介質(zhì)
- HBase集群平衡方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)
- 一種基于AEP內(nèi)存的HBase集群性能優(yōu)化方法及系統(tǒng)
- 數(shù)據(jù)庫
- 數(shù)據(jù)庫管理系統(tǒng)及數(shù)據(jù)庫
- 數(shù)據(jù)庫構(gòu)筑裝置、數(shù)據(jù)庫檢索裝置、數(shù)據(jù)庫裝置、數(shù)據(jù)庫構(gòu)筑方法、以及數(shù)據(jù)庫檢索方法
- 數(shù)據(jù)庫和數(shù)據(jù)庫處理方法
- 數(shù)據(jù)庫系統(tǒng)、數(shù)據(jù)庫更新方法、數(shù)據(jù)庫以及數(shù)據(jù)庫更新程序
- 容器數(shù)據(jù)庫
- 數(shù)據(jù)庫同步方法及數(shù)據(jù)庫
- 一種MongoDB數(shù)據(jù)庫對(duì)象復(fù)制延遲監(jiān)控方法和裝置
- 數(shù)據(jù)分布式存儲(chǔ)方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)
- 數(shù)據(jù)庫語句執(zhí)行方法及裝置





