[發明專利]一種大規模并行處理系統及數據處理方法在審
| 申請號: | 201710850853.8 | 申請日: | 2017-09-20 |
| 公開(公告)號: | CN109522053A | 公開(公告)日: | 2019-03-26 |
| 發明(設計)人: | 戴志勇;夏晨;鄭曉文 | 申請(專利權)人: | 阿里巴巴集團控股有限公司 |
| 主分類號: | G06F9/38 | 分類號: | G06F9/38 |
| 代理公司: | 北京安信方達知識產權代理有限公司 11262 | 代理人: | 李丹;栗若木 |
| 地址: | 英屬開曼群島大開*** | 國省代碼: | 開曼群島;KY |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 處理節點 存儲節點 管理節點 元數據 大規模并行處理系統 數據處理 處理結果返回 元數據存儲 存儲處理 單個處理 節點提供 可擴展性 瓶頸問題 申請 剝離 存儲 分發 架構 共享 服務 管理 | ||
1.一種大規模并行處理系統,其特征在于,包括:管理節點、兩個或兩個以上的處理節點、以及存儲節點;其中,
管理節點,用于接收來自用戶的請求并分發給處理節點,以及用于將來自處理節點對用戶的請求的處理結果返回給對應的用戶;
處理節點,用于處理來自管理節點的用戶的請求,并對存儲在存儲節點上的元數據進行操作;
存儲節點,存儲處理節點的元數據。
2.根據權利要求1所述的大規模并行處理系統,其特征在于,所述大規模并行處理系統還包括調度節點,用于在所述處理節點的進程或者所述處理節點意外退出后,啟動新的處理節點的進程或者處理節點;
所述管理節點還用于:將意外退出的處理節點的用戶的請求轉發給新的處理節點。
3.根據權利要求1或2所述的大規模并行處理系統,其特征在于,所述處理節點還用于:啟動時向所述管理節點發送注冊請求;
所述管理節點還用于:接受所述處理節點的注冊請求,并記錄注冊的處理節點的信息。
4.根據權利要求1或2所述的大規模并行處理系統,其特征在于,所述存儲節點設置在第三方數據存儲系統。
5.一種并行處理系統,其特征在于,包括:管理節點、兩個或兩個以上的處理節點、以及存儲節點;其中,
管理節點,用于接收來自用戶的請求并分發給處理節點;
處理節點,用于處理來自管理節點的用戶的請求,并對存儲在存儲節點上的元數據進行操作;
存儲節點,存儲處理節點的元數據。
6.一種數據處理方法,其特征在于,在至少包括管理節點、兩個或兩個以上處理節點、以及存儲節點的大規模并行處理系統中;包括:
處理節點接收來自管理節點分發的請求;
處理節點根據請求對存儲在存儲節點上的元數據進行操作。
7.根據權利要求6所述的數據處理方法,其特征在于,所述方法之前還包括:所述處理節點啟動時向所述管理節點發送注冊請求,以使得注冊的處理節點的信息記錄在所述管理節點。
8.根據權利要求6或7所述的數據處理方法,其特征在于,在所述處理節點的進程或者所述處理節點意外退出后,還包括:啟動新的處理節點的進程或者處理節點。
9.一種計算機可讀存儲介質,存儲有計算機可執行指令,所述計算機可執行指令用于執行權利要求6~權利要求8任一項所述的實現數據處理的方法。
10.一種實現數據處理的裝置,包括存儲器和處理器,其中,存儲器中存儲有以下可被處理器執行的指令:接收并處理來自管理節點分發的請求;根據請求對存儲在存儲節點上的元數據進行操作。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于阿里巴巴集團控股有限公司,未經阿里巴巴集團控股有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710850853.8/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種計算裝置及板卡
- 下一篇:數據中心能耗設備調度方法及裝置





