[發(fā)明專利]一種遠端直接內(nèi)存訪問實現(xiàn)方法、裝置及系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201410139261.1
• 申請日: 2014-04-08
• 公開（公告）號: CN103902486B
• 公開（公告）日: 2017-02-22
• 發(fā)明（設計）人: 陳昊;俞柏峰;徐建榮
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F13/28
• 分類號: G06F13/28;H04L29/06
• 代理公司: 北京中博世達專利商標代理有限公司11274
• 代理人: 申健

技術領域

本發(fā)明涉及通信領域，尤其涉及一種遠端直接內(nèi)存訪問實現(xiàn)方法、裝置及系統(tǒng)。

背景技術

遠端直接內(nèi)存訪問(Remote?Direct?Memory?Access，RDMA)是一種高性能的數(shù)據(jù)拷貝技術，它可以將數(shù)據(jù)從一個本端系統(tǒng)中快速轉(zhuǎn)移到遠程系統(tǒng)的存儲器中，而不對操作系統(tǒng)造成任何影響，從而減少計算機的處理負擔。

現(xiàn)有技術中存在一種遠端直接內(nèi)存訪問的方法，通過利用基于PCIE(Peripheral?Component?Interconnect?Express，快速外部組件互聯(lián))接口的RDMA網(wǎng)卡，實現(xiàn)兩個系統(tǒng)之間的遠端直接內(nèi)存訪問。在現(xiàn)有技術中，需要利用PCIE總線實現(xiàn)遠端直接內(nèi)存訪問。然而，PCIE總線為二級總線，本身有一個包括根復合體、交換器和PCIE端點設備的系統(tǒng)拓撲結(jié)構，現(xiàn)有技術中RDMA網(wǎng)卡只能作為一個PCIE端點設備，通過PCIE協(xié)議，利用PCIE交換器和根復合體與CPU進行通信，導致在進行遠端直接內(nèi)存訪問時，存在較大的延時。

發(fā)明內(nèi)容

本發(fā)明的實施例提供一種遠端直接內(nèi)存訪問實現(xiàn)方法、裝置及系統(tǒng)，能夠基于QPI(Quick?Path?Interconnection，快速通路互聯(lián))總線實現(xiàn)系統(tǒng)之間的遠端直接內(nèi)存訪問。

為達到上述目的，本發(fā)明的實施例采用如下技術方案：

第一方面，公開了一種遠端直接內(nèi)存訪問實現(xiàn)方法，用于內(nèi)存訪問系統(tǒng)，所述內(nèi)存訪問系統(tǒng)包括本端和對端，所述本端和所述對端包括各自的中央處理器CPU和遠端直接內(nèi)存訪問RDMA模塊，所述CPU和所述RDMA模塊之間通過快速通路互聯(lián)QPI相連，所述方法包括：

所述本端的RDMA模塊生成RDMA讀請求報文，并將所述RDMA讀請求報文發(fā)送給所述對端的RDMA模塊，所述RDMA讀請求報文攜帶讀數(shù)據(jù)地址信息，所述讀數(shù)據(jù)地址信息為讀取數(shù)據(jù)在所述對端的存儲地址，所述讀取數(shù)據(jù)為所述本端需要讀取的數(shù)據(jù)；

所述本端的RDMA模塊接收來自所述對端的RDMA模塊的RDMA讀請求響應報文，所述RDMA讀請求響應報文攜帶所述讀取數(shù)據(jù)；

所述本端的RDMA模塊根據(jù)QPI協(xié)議，將所述RDMA讀請求響應報文轉(zhuǎn)化成QPI寫請求報文，所述QPI寫請求報文攜帶所述讀取數(shù)據(jù)；

所述本端的CPU根據(jù)所述QPI寫請求報文，將所述讀取數(shù)據(jù)存儲在所述本端的內(nèi)存單元中。

結(jié)合第一方面，在第一種可能的實現(xiàn)方式中，所述本端的RDMA模塊根據(jù)QPI協(xié)議，將所述RDMA讀請求響應報文轉(zhuǎn)化成QPI寫請求報文，具體為，

所述本端的RDMA模塊根據(jù)RDMA協(xié)議，對所述RDMA讀請求響應報進行解析，獲得所述讀取數(shù)據(jù)；

所述本端的RDMA模塊根據(jù)所述讀取數(shù)據(jù)以及所述QPI協(xié)議，生成所述QPI寫請求報文。

結(jié)合第一方面，在第二種可能的實現(xiàn)方式中，所述本端的CPU根據(jù)所述QPI寫請求報文，將所述讀取數(shù)據(jù)存儲在所述本端的內(nèi)存單元中之后，所述方法還包括：

所述本端的RDMA模塊生成QPI中斷，并將所述QPI中斷發(fā)送給所述本端的CPU，所述QPI中斷用于通知所述本端的CPU所述本端的RDMA模塊已獲得所述讀取數(shù)據(jù)。

第二方面，公開了一種遠端直接內(nèi)存訪問實現(xiàn)方法，用于內(nèi)存訪問系統(tǒng)，所述內(nèi)存訪問系統(tǒng)包括本端和對端，所述本端和所述對端包括各自的中央處理器CPU和遠端直接內(nèi)存訪問RDMA模塊，所述CPU和所述RDMA模塊之間通過快速通路互聯(lián)QPI相連，所述方法包括：

所述對端的RDMA模塊接收來自所述本端的RDMA模塊的RDMA讀請求報文，所述RDMA讀請求報文攜帶讀數(shù)據(jù)地址信息，所述讀數(shù)據(jù)地址信息為讀取數(shù)據(jù)在所述對端的存儲地址，所述讀取數(shù)據(jù)為所述本端需要讀取的數(shù)據(jù)；

所述對端的RDMA模塊根據(jù)QPI協(xié)議，將所述RDMA讀請求報文轉(zhuǎn)化成QPI讀請求報文，所述QPI讀請求報文攜帶所述讀數(shù)據(jù)地址信息；

所述對端的CPU根據(jù)所述QPI讀請求報文，從所述讀數(shù)據(jù)地址信息對應的內(nèi)存單元中獲取所述讀取數(shù)據(jù)；

所述對端的RDMA模塊根據(jù)所述讀取數(shù)據(jù)生成RDMA讀請求響應報文；

所述對端的RDMA模塊將所述RDMA讀請求響應報文發(fā)送給所述本端的RDMA模塊。

結(jié)合第二方面，在第一種可能的實現(xiàn)方式中，所述對端的RDMA模塊根據(jù)QPI協(xié)議將所述RDMA讀請求報文轉(zhuǎn)化成QPI讀請求報文，具體為，