[發明專利]基于Spark Shuffle的遠程直接內存訪問系統在審
| 申請號: | 201811501978.0 | 申請日: | 2018-12-10 |
| 公開(公告)號: | CN109861967A | 公開(公告)日: | 2019-06-07 |
| 發明(設計)人: | 不公告發明人 | 申請(專利權)人: | 中國人民銀行清算總中心 |
| 主分類號: | H04L29/06 | 分類號: | H04L29/06;H04L29/08;H04L12/26 |
| 代理公司: | 北京三友知識產權代理有限公司 11127 | 代理人: | 王濤 |
| 地址: | 100048 北京市海*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 傳輸數據 發送通道 核對 遠程直接內存訪問 調用 發送管理器 接收管理器 接收器 接收通道 信息存儲 發送端 發送器 接收端 傳輸數據生成 技術獲取 核驗 存儲 | ||
1.一種基于Spark Shuffle的遠程直接內存訪問系統,其特征在于,所述系統包括:發送端及接收端;
所述發送端包括發送器、發送通道及發送管理器;所述發送器將獲取到的傳輸數據存儲至所述發送通道,并調用所述發送管理器;所述發送管理器被調用后,根據所述傳輸數據生成核對信息,并將所述核對信息存儲至所述發送通道;
所述接收端包括接收器、接收通道及接收管理器;所述接收器通過遠程直接內存訪問技術獲取所述發送通道中的傳輸數據及核對信息,將所述傳輸數據及所述核對信息存儲至所述接收通道,并調用所述接收管理器;所述接收管理器被調用后,根據所述核對信息對所述傳輸數據進行核驗。
2.根據權利要求1所述的系統,其特征在于,所述發送端還包括注冊器,所述注冊器用于將傳輸任務注冊為支持遠程直接內存訪問的格式;其中,所述傳輸任務中存儲所述傳輸數據。
3.根據權利要求2所述的系統,其特征在于,所述發送管理器還用于查看所述發送器及所述發送通道的狀態,并向所述發送器反饋發送狀態提醒,以使所述發送器根據所述發送狀態提醒,通過所述傳輸任務獲取所述傳輸數據。
4.根據權利要求1所述的系統,其特征在于,所述接收端還包括監聽器,所述監聽器用于監聽所述接收通道,當監聽到所述傳輸數據進入所述接收通道時,向所述接收器發送接收提醒,以使所述接收器根據所述接收提醒調用所述接收管理器。
5.根據權利要求1所述的系統,其特征在于,所述接收管理器還用于查看所述接收器及所述接收通道的狀態,并向所述接收器反饋接收狀態提醒,以使所述接收器根據所述接收狀態提醒,通過所述發送通道獲取所述傳輸數據。
7.根據權利要求1所述的系統,其特征在于,所述接收管理器還用于對所述傳輸數據進行核驗后,所述接收管理器向所述接收器發送核驗結果。
8.根據權利要求7所述的系統,其特征在于,所述核驗結果包括核驗通過或核驗不通過;所述核驗結果為核驗不通過時,所述接收器向所述發送器發送傳輸失敗提醒。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于中國人民銀行清算總中心,未經中國人民銀行清算總中心許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201811501978.0/1.html,轉載請聲明來源鉆瓜專利網。





