[發明專利]提升Hadoop雙機集群下Web_HDFS可用性的方法有效
| 申請號: | 201811018001.3 | 申請日: | 2018-09-03 |
| 公開(公告)號: | CN109104321B | 公開(公告)日: | 2021-05-18 |
| 發明(設計)人: | 林其錦 | 申請(專利權)人: | 福建星瑞格軟件有限公司 |
| 主分類號: | H04L12/24 | 分類號: | H04L12/24;H04L12/26;H04L29/08 |
| 代理公司: | 福州市鼓樓區京華專利事務所(普通合伙) 35212 | 代理人: | 王美花 |
| 地址: | 350000 福建省福州市鼓樓*** | 國省代碼: | 福建;35 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 提升 hadoop 雙機 集群 web_hdfs 可用性 方法 | ||
1.一種提升Hadoop雙機集群下Web_HDFS可用性的方法,其特征在于:包括如下步驟:
步驟S10、創建Hadoop的zookeeper會話;
步驟S20、啟動活動節點的緩存功能,從zookeeper會話中獲取活動節點以及備用節點并進行緩存;啟動活動節點的更新功能,調用文件管理服務對活動節點進行逐一訪問,驗證活動節點的可操作性,并更新可操作性信息至應用端;
步驟S30、應用端從緩存中獲取活動節點,調用Web_HDFS進行文件操作,若文件操作失敗,依據可操作性信息獲取具備可操作性的活動節點進行文件操作;
所述步驟S10具體為:
步驟S11、配置zookeeper地址;
步驟S12、創建zookeeper會話,建立應用端與服務器的連接,連接成功后保存會話連接;
所述步驟S20具體為:
步驟S21、啟動活動節點的緩存功能,在程序初始化時,自動從zookeeper會話中的zookeeper地址獲取各NameNode信息并區分出活動節點以及備用節點,并對活動節點以及備用節點進行緩存;
步驟S22、啟動活動節點的定時更新功能,在設定的第一周期內調用文件管理服務對活動節點進行逐一訪問,驗證活動節點的可操作性,并更新可操作性信息至應用端。
2.如權利要求1所述的提升Hadoop雙機集群下Web_HDFS可用性的方法,其特征在于:所述步驟S22中,所述在設定的第一周期內調用文件管理服務具體為:
記錄活動節點可操作性信息的更新次數,若在設定的第二周期內未更新,則延長第一周期至第三周期;若延長第一周期至第三周期后,在設定的第二周期內產生更新,則縮短第三周期至第一周期。
3.如權利要求1所述的提升Hadoop雙機集群下Web_HDFS可用性的方法,其特征在于:所述步驟S30具體為:
步驟S31、應用端從緩存中獲取活動節點,調用Web_HDFS進行文件操作,若文件操作失敗,則進入步驟S32;若文件操作成功,則結束流程;
步驟S32、依據可操作性信息,通過zookeeper會話獲取具備可操作性的活動節點進行文件操作,操作完成結束流程。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于福建星瑞格軟件有限公司,未經福建星瑞格軟件有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201811018001.3/1.html,轉載請聲明來源鉆瓜專利網。





