[發(fā)明專利]一種分布式文件處理方法及裝置有效
| 申請?zhí)枺?/td> | 201611265985.6 | 申請日: | 2016-12-30 |
| 公開(公告)號: | CN107070972B | 公開(公告)日: | 2020-02-07 |
| 發(fā)明(設計)人: | 徐景良;萬杰;倪遠;任明 | 申請(專利權)人: | 中國銀聯(lián)股份有限公司 |
| 主分類號: | H04L29/08 | 分類號: | H04L29/08;H04L29/06;H04L12/24 |
| 代理公司: | 11291 北京同達信恒知識產權代理有限公司 | 代理人: | 黃志華 |
| 地址: | 200135 *** | 國省代碼: | 上海;31 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 文件系統(tǒng) 元數(shù)據(jù)服務器 文件讀寫 集群 共享目錄 發(fā)送 掛載 存儲 終端 數(shù)據(jù)處理技術 分布式文件 接收終端 操作系統(tǒng) 耗時 | ||
1.一種分布式文件處理方法,其特征在于,包括:
元數(shù)據(jù)服務器接收終端發(fā)送的文件讀寫請求,所述文件讀寫請求是根據(jù)所述終端掛載的所述元數(shù)據(jù)服務器的共享目錄發(fā)送的;
所述元數(shù)據(jù)服務器根據(jù)所述共享目錄掛載的文件系統(tǒng),向所述文件系統(tǒng)的存儲集群發(fā)送所述文件讀寫請求,所述元數(shù)據(jù)服務器與所述存儲集群位于同一文件系統(tǒng)集群中。
2.如權利要求1所述的方法,其特征在于,所述元數(shù)據(jù)服務器包括主節(jié)點服務器和備節(jié)點服務器;
所述元數(shù)據(jù)服務器接收終端發(fā)送的文件讀寫請求,包括:
所述主節(jié)點服務器接收終端發(fā)送的文件讀寫請求;
所述元數(shù)據(jù)服務器接收終端發(fā)送的文件讀寫請求之后,還包括:
所述主節(jié)點服務器在確定所述文件讀寫請求為多個文件的讀寫請求時,根據(jù)所有元數(shù)據(jù)服務器的工作量,確定出處理所述文件讀寫請求的備節(jié)點服務器;
所述主節(jié)點服務器將所述文件讀寫請求通過內部傳輸通道發(fā)送給所述備節(jié)點服務器。
3.如權利要求2所述的方法,其特征在于,所述根據(jù)所有元數(shù)據(jù)服務器的工作量,確定出處理所述文件讀寫請求的備節(jié)點服務器,包括:
針對一個元數(shù)據(jù)服務器,所述元數(shù)據(jù)服務器根據(jù)以下公式計算所述元數(shù)據(jù)服務器的工作量:
Gk=Nk*Tk
其中,Nk為第K元數(shù)據(jù)服務器的緩存中存儲的文件讀寫請求的數(shù)量,Tk為第K元數(shù)據(jù)服務器處理緩存中所有的文件讀寫請求所需的總時間,Gk為第K元數(shù)據(jù)服務器的工作量。
4.如權利要求1所述的方法,其特征在于,所述元數(shù)據(jù)服務器的對外存儲服務IP為同一虛擬IP;所述元數(shù)據(jù)服務器包括主節(jié)點服務器和備節(jié)點服務器;
還包括:所述主節(jié)點服務器將所述主節(jié)點服務器的服務訪問端口與所述虛擬IP進行綁定。
5.如權利要求1所述的方法,其特征在于,還包括:
所述元數(shù)據(jù)服務器接收集群監(jiān)控器的狀態(tài)變更信息,所述集群監(jiān)控器屬于所述文件系統(tǒng)集群。
6.如權利要求1至5任一項所述的方法,其特征在于,還包括:
所述元數(shù)據(jù)服務器向所述文件系統(tǒng)集群中的任一元數(shù)據(jù)服務器發(fā)送檢測報文,以確定所述任一元數(shù)據(jù)服務器的工作狀態(tài)。
7.如權利要求6所述的方法,其特征在于,所述元數(shù)據(jù)服務器向所述文件系統(tǒng)集群中的任一元數(shù)據(jù)服務器發(fā)送檢測報文,包括:
所述元數(shù)據(jù)服務器發(fā)送ICMP數(shù)據(jù)包;或,
所述元數(shù)據(jù)服務器監(jiān)控所述任一元數(shù)據(jù)服務器的服務訪問端口的狀態(tài);或,
所述元數(shù)據(jù)服務器監(jiān)控所述任一元數(shù)據(jù)服務器的服務可用性。
8.如權利要求6所述的方法,其特征在于,所述共享目錄由網絡文件系統(tǒng)NFS提供。
9.一種分布式文件處理裝置,其特征在于,包括:
接收模塊,用于接收終端發(fā)送的文件讀寫請求,所述文件讀寫請求是根據(jù)所述終端掛載的元數(shù)據(jù)服務器的共享目錄發(fā)送的;
發(fā)送模塊,用于根據(jù)所述共享目錄掛載的文件系統(tǒng),向所述文件系統(tǒng)的存儲集群發(fā)送所述文件讀寫請求,所述元數(shù)據(jù)服務器與所述存儲集群位于同一文件系統(tǒng)集群中。
10.如權利要求9所述的裝置,其特征在于,所述元數(shù)據(jù)服務器包括主節(jié)點服務器和備節(jié)點服務器;
所述主節(jié)點服務器還包括處理模塊,用于:
在確定所述文件讀寫請求為多個文件的讀寫請求時,根據(jù)所有元數(shù)據(jù)服務器的工作量,確定出處理所述文件讀寫請求的備節(jié)點服務器;
將所述文件讀寫請求通過內部傳輸通道發(fā)送給所述備節(jié)點服務器。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于中國銀聯(lián)股份有限公司,未經中國銀聯(lián)股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業(yè)授權和技術合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201611265985.6/1.html,轉載請聲明來源鉆瓜專利網。
- 一種提高元數(shù)據(jù)服務可靠性的方法及其系統(tǒng)
- 一種接管故障元數(shù)據(jù)服務器的方法、裝置及系統(tǒng)
- 分布式文件系統(tǒng)訪問方法、元數(shù)據(jù)服務器及客戶端
- 一種元數(shù)據(jù)服務器熱點均衡方法
- 一種遠程目錄分支點維護系統(tǒng)及其方法
- 用于動態(tài)復制數(shù)據(jù)的方法和系統(tǒng)
- 一種元數(shù)據(jù)服務器的服務控制方法及裝置
- 一種元數(shù)據(jù)服務器動態(tài)負載均衡的方法及系統(tǒng)
- 數(shù)據(jù)存儲系統(tǒng)及方法
- 負載均衡控制方法和裝置、存儲介質及電子設備
- 一種集群調度呼叫業(yè)務中主叫終端信息顯示方法
- 更新網絡流量管理設備同時維持有效性
- 與集群調度系統(tǒng)進行通信的方法、群集接入網關及系統(tǒng)
- 一種管理集群通信系統(tǒng)資源的方法
- 基于Kubernetes和OpenStack容器云平臺多集群構建方法、介質、設備
- 一種容災系統(tǒng)、容災處理方法、監(jiān)控節(jié)點和備份集群
- 一種ETCD集群恢復方法、系統(tǒng)、設備及計算機介質
- 混合云場景下保證可用集群數(shù)量的方法、裝置及系統(tǒng)
- 一種集群拓撲更新方法、系統(tǒng)、設備及計算機存儲介質
- 集群切換方法、集群切換裝置、電子設備及可讀存儲介質





