[發(fā)明專(zhuān)利]基于hadoop的異地雙活容災(zāi)方法、裝置、設(shè)備和可讀存儲(chǔ)介質(zhì)在審
| 申請(qǐng)?zhí)枺?/td> | 202210445959.0 | 申請(qǐng)日: | 2022-04-26 |
| 公開(kāi)(公告)號(hào): | CN114780293A | 公開(kāi)(公告)日: | 2022-07-22 |
| 發(fā)明(設(shè)計(jì))人: | 劉拓;于洋;高經(jīng)郡 | 申請(qǐng)(專(zhuān)利權(quán))人: | 北京科杰科技有限公司 |
| 主分類(lèi)號(hào): | G06F11/14 | 分類(lèi)號(hào): | G06F11/14;G06F11/07;G06F16/178;G06F16/182;G06F16/18 |
| 代理公司: | 暫無(wú)信息 | 代理人: | 暫無(wú)信息 |
| 地址: | 100020 北京市朝陽(yáng)區(qū)阜*** | 國(guó)省代碼: | 北京;11 |
| 權(quán)利要求書(shū): | 查看更多 | 說(shuō)明書(shū): | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 基于 hadoop 異地 雙活容災(zāi) 方法 裝置 設(shè)備 可讀 存儲(chǔ) 介質(zhì) | ||
1.一種基于hadoop的異地雙活容災(zāi)方法,其特征在于,包括:
基于hadoop框架的主集群,構(gòu)建與其對(duì)應(yīng)的基于hadoop框架的鏡像集群;所述主集群和鏡像集群分布在不同的機(jī)房,并保持心跳;
通過(guò)異步的方式,同步所述主集群和鏡像集群間的日志和數(shù)據(jù)文件。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述通過(guò)異步的方式,同步所述主集群和鏡像集群間的日志和數(shù)據(jù)文件包括:
通過(guò)共享日志,進(jìn)行事務(wù)日志的中轉(zhuǎn)。
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述共享日志包括由多個(gè)journalNode組成。
4.根據(jù)權(quán)利要求3所述的方法,其特征在于,所述主集群和鏡像集群通過(guò)datapipeline方式進(jìn)行傳輸。
5.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述主集群和鏡像集群各自的dataNode只向各自的nameNode匯報(bào)位置及狀態(tài)信息。
6.根據(jù)權(quán)利要求5所述的方法,其特征在于,所述主集群和鏡像集群的yarn資源調(diào)度相互獨(dú)立。
7.一種基于hadoop的異地雙活容災(zāi)裝置,其特征在于,包括:
構(gòu)建模塊,用于基于hadoop框架的主集群,構(gòu)建與其對(duì)應(yīng)的基于hadoop框架的鏡像集群;所述主集群和鏡像集群分布在不同的機(jī)房,并保持心跳;
同步模塊,用于通過(guò)異步的方式,同步所述主集群和鏡像集群間的日志和數(shù)據(jù)文件。
8.根據(jù)權(quán)利要求7所述的裝置,其特征在于,所述通過(guò)異步的方式,同步所述主集群和鏡像集群間的日志和數(shù)據(jù)文件包括:
通過(guò)共享日志,進(jìn)行事務(wù)日志的中轉(zhuǎn)。
9.一種電子設(shè)備,包括存儲(chǔ)器和處理器,所述存儲(chǔ)器上存儲(chǔ)有計(jì)算機(jī)程序,其特征在于,所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)如權(quán)利要求1~6中任一項(xiàng)所述的方法。
10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其上存儲(chǔ)有計(jì)算機(jī)程序,其特征在于,所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1~6中任一項(xiàng)所述的方法。
該專(zhuān)利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專(zhuān)利權(quán)人授權(quán)。該專(zhuān)利全部權(quán)利屬于北京科杰科技有限公司,未經(jīng)北京科杰科技有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買(mǎi)此專(zhuān)利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202210445959.0/1.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專(zhuān)利網(wǎng)。
- 同類(lèi)專(zhuān)利
- 專(zhuān)利分類(lèi)
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F11-00 錯(cuò)誤檢測(cè);錯(cuò)誤校正;監(jiān)控
G06F11-07 .響應(yīng)錯(cuò)誤的產(chǎn)生,例如,容錯(cuò)
G06F11-22 .在準(zhǔn)備運(yùn)算或者在空閑時(shí)間期間內(nèi),通過(guò)測(cè)試作故障硬件的檢測(cè)或定位
G06F11-28 .借助于檢驗(yàn)標(biāo)準(zhǔn)程序或通過(guò)處理作錯(cuò)誤檢測(cè)、錯(cuò)誤校正或監(jiān)控
G06F11-30 .監(jiān)控
G06F11-36 .通過(guò)軟件的測(cè)試或調(diào)試防止錯(cuò)誤
- 一種實(shí)現(xiàn)大數(shù)據(jù)處理的方法及裝置
- 一種用PVFS替代Hadoop存儲(chǔ)模塊的方法
- Hadoop數(shù)據(jù)文件的生成方法與解析方法
- 調(diào)用hadoop集群的方法和裝置
- 一種基于可信計(jì)算的Hadoop平臺(tái)度量方法
- 云環(huán)境中模型驅(qū)動(dòng)的Hadoop部署方法
- 基于麒麟云計(jì)算平臺(tái)的Hadoop集群自動(dòng)化部署方法
- 一種用lustre文件系統(tǒng)替換Hadoop的HDFS文件系統(tǒng)的方法
- 數(shù)據(jù)存儲(chǔ)、查詢(xún)的方法、裝置、系統(tǒng)、設(shè)備、存儲(chǔ)介質(zhì)
- 一種文件型門(mén)衛(wèi)式存儲(chǔ)加密功能的Hadoop系統(tǒng)及其應(yīng)用方法
- 限制VoIP業(yè)務(wù)異地出局的實(shí)現(xiàn)方法
- 異地出便系統(tǒng)結(jié)構(gòu)
- 基于企業(yè)內(nèi)網(wǎng)的異地電子數(shù)據(jù)恢復(fù)系統(tǒng)
- 一種異地災(zāi)備的方法和系統(tǒng)
- 一種異地出行關(guān)聯(lián)信息的輸出方法及裝置
- 雙活數(shù)據(jù)中心裝置
- 寬帶用戶(hù)的異地認(rèn)證方法、鑒權(quán)認(rèn)證服務(wù)器和區(qū)塊鏈
- 基于區(qū)塊鏈的醫(yī)療保險(xiǎn)異地就醫(yī)清算結(jié)算方法及系統(tǒng)
- 異地訪(fǎng)問(wèn)方法、裝置、設(shè)備與計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)
- 協(xié)作系統(tǒng)、協(xié)作控制方法及協(xié)作控制裝置
- 一種基于雙活邏輯卷的存儲(chǔ)雙活系統(tǒng)設(shè)計(jì)方法
- 一種IPSAN容災(zāi)系統(tǒng)的建立方法及裝置
- 一種兩地三中心容災(zāi)方法、裝置、設(shè)備及系統(tǒng)
- 一種生產(chǎn)數(shù)據(jù)容災(zāi)的方法、系統(tǒng)及存儲(chǔ)介質(zhì)
- 一種雙活數(shù)據(jù)庫(kù)容災(zāi)系統(tǒng)及方法
- 無(wú)共享數(shù)據(jù)庫(kù)集群異地雙活容災(zāi)系統(tǒng)
- 虛擬化磁盤(pán)雙活容災(zāi)方法、裝置和系統(tǒng)
- 一種可實(shí)現(xiàn)關(guān)鍵業(yè)務(wù)容災(zāi)的用電信息采集系統(tǒng)及其運(yùn)行方法
- 一種增量同步環(huán)形兩地三中心的方法、系統(tǒng)、設(shè)備及介質(zhì)
- 一種容災(zāi)備份方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)





