[發(fā)明專利]數(shù)據(jù)搬運(yùn)方法及裝置

在審

• 申請?zhí)枺?/td>: 202011502937.0
• 申請日: 2020-12-17
• 公開（公告）號: CN112463680A
• 公開（公告）日: 2021-03-09
• 發(fā)明（設(shè)計(jì)）人: 鄧良策
• 申請（專利權(quán)）人: 上海燧原科技有限公司
• 主分類號: G06F13/38
• 分類號: G06F13/38;G06F13/40;G06F15/78
• 代理公司: 北京集佳知識產(chǎn)權(quán)代理有限公司 11227
• 代理人: 張建

本發(fā)明公開了一種數(shù)據(jù)搬運(yùn)方法及裝置，所述數(shù)據(jù)搬運(yùn)方法應(yīng)用于芯片式集群，所述數(shù)據(jù)搬運(yùn)方法根據(jù)所述芯片式集群的拓?fù)浣Y(jié)構(gòu)確定從起始芯片節(jié)點(diǎn)到目的芯片節(jié)點(diǎn)的通信路徑；根據(jù)所述通信路徑生成數(shù)據(jù)搬運(yùn)請求，參照ID集合從所述起始芯片節(jié)點(diǎn)依次在各芯片節(jié)點(diǎn)中傳輸所述數(shù)據(jù)搬運(yùn)請求，以使所述目的芯片節(jié)點(diǎn)接收到所述數(shù)據(jù)搬運(yùn)請求時(shí)，執(zhí)行與所述數(shù)據(jù)搬運(yùn)請求所對應(yīng)的數(shù)據(jù)操作；可見，本發(fā)明技術(shù)方案中，各個(gè)芯片節(jié)點(diǎn)的轉(zhuǎn)換器將接收的數(shù)據(jù)搬運(yùn)請求中的請求訪問地址轉(zhuǎn)換為芯片節(jié)點(diǎn)的本地地址，利用芯片式集群的拓?fù)浣Y(jié)構(gòu)將數(shù)據(jù)搬運(yùn)請求從起始芯片節(jié)點(diǎn)傳輸給目的芯片節(jié)點(diǎn)，實(shí)現(xiàn)了跨芯片的數(shù)據(jù)搬運(yùn)，進(jìn)而可以對大規(guī)模的數(shù)據(jù)進(jìn)行快速處理。

技術(shù)領(lǐng)域

本發(fā)明涉及芯片技術(shù)領(lǐng)域，特別是涉及一種數(shù)據(jù)搬運(yùn)方法及裝置。

背景技術(shù)

如今，隨著信息化技術(shù)的發(fā)展，信息化的數(shù)據(jù)越來越復(fù)雜，處理數(shù)據(jù)所需的計(jì)算量也越來越大。當(dāng)前，通過各芯片內(nèi)部的互聯(lián)端口，可以構(gòu)建由多個(gè)芯片連接而成的分布式芯片集群。通過構(gòu)建完成的分布式芯片集群，可以實(shí)現(xiàn)數(shù)據(jù)在不同的芯片節(jié)點(diǎn)中的交換傳輸，進(jìn)而對大規(guī)模的數(shù)據(jù)進(jìn)行快速處理。

目前，缺少一種能夠?qū)崿F(xiàn)在分布式芯片集群中兩個(gè)沒有直接互聯(lián)的芯片節(jié)點(diǎn)進(jìn)行數(shù)據(jù)搬運(yùn)的方法。

發(fā)明內(nèi)容

鑒于上述問題，本發(fā)明提供一種克服上述問題或者至少部分地解決上述問題的一種分布式芯片集群中芯片節(jié)點(diǎn)之間的數(shù)據(jù)搬運(yùn)方法及裝置。

本發(fā)明一方面提供了一種數(shù)據(jù)搬運(yùn)方法，應(yīng)用于芯片式集群，所述芯片式集群中每一個(gè)芯片節(jié)點(diǎn)具有N個(gè)互聯(lián)端口以及與各個(gè)互聯(lián)端口所連接的轉(zhuǎn)換器；所述數(shù)據(jù)搬運(yùn)方法包括：

根據(jù)所述芯片式集群的拓?fù)浣Y(jié)構(gòu)確定從起始芯片節(jié)點(diǎn)到目的芯片節(jié)點(diǎn)的通信路徑；

根據(jù)所述通信路徑生成數(shù)據(jù)搬運(yùn)請求，所述數(shù)據(jù)搬運(yùn)請求中包括請求訪問地址以及依據(jù)所述通信路徑依次排列的各芯片節(jié)點(diǎn)的互聯(lián)端口的ID集合；

參照所述ID集合從所述起始芯片節(jié)點(diǎn)依次在各芯片節(jié)點(diǎn)中傳輸所述數(shù)據(jù)搬運(yùn)請求，以使所述目的芯片節(jié)點(diǎn)接收到所述數(shù)據(jù)搬運(yùn)請求時(shí)，執(zhí)行與所述數(shù)據(jù)搬運(yùn)請求所對應(yīng)的數(shù)據(jù)操作；

其中，當(dāng)與第一芯片節(jié)點(diǎn)的第一互聯(lián)端口相連接的轉(zhuǎn)換器接收到所述數(shù)據(jù)搬運(yùn)請求時(shí)，所述轉(zhuǎn)換器將所述數(shù)據(jù)搬運(yùn)請求中的請求訪問地址修改為所述第一互聯(lián)端口的地址，所述第一芯片節(jié)點(diǎn)將所述數(shù)據(jù)搬運(yùn)請求通過所述第一互聯(lián)端口傳輸?shù)剿龅诙酒?jié)點(diǎn)的第二互聯(lián)端口，其中，所述第一芯片節(jié)點(diǎn)以及所述第二芯片節(jié)點(diǎn)均為所述通信路徑中的節(jié)點(diǎn)且所述第二芯片節(jié)點(diǎn)為所述通信路徑中所述第一芯片節(jié)點(diǎn)之后的節(jié)點(diǎn)，所述第一芯片節(jié)點(diǎn)和所述第二芯片節(jié)點(diǎn)通過所述第一互聯(lián)端口和所述第二互聯(lián)端口連接。

在一些實(shí)施例中，所述數(shù)據(jù)傳輸請求包括：先導(dǎo)特征請求和與所述先導(dǎo)特征請求對應(yīng)的多個(gè)數(shù)據(jù)操作請求，所述方法還包括：

當(dāng)所述第二互聯(lián)端口的轉(zhuǎn)換器接收到所述先導(dǎo)特征請求時(shí)，若所述第二芯片節(jié)點(diǎn)為所述目的芯片節(jié)點(diǎn)，則確定與所述先導(dǎo)特征請求對應(yīng)的多個(gè)數(shù)據(jù)操作請求的目的地址為所述第二芯片節(jié)點(diǎn)的系統(tǒng)內(nèi)部存儲空間的地址，在所述第二互聯(lián)端口的轉(zhuǎn)換器接收到與所述先導(dǎo)特征請求對應(yīng)的多個(gè)數(shù)據(jù)操作請求時(shí)，將所述多個(gè)數(shù)據(jù)操作請求中的請求訪問地址修改為所述第二芯片節(jié)點(diǎn)的系統(tǒng)內(nèi)部存儲空間的地址。

在一些實(shí)施例中，所述數(shù)據(jù)傳輸請求包括：先導(dǎo)特征請求和與所述先導(dǎo)特征請求對應(yīng)的多個(gè)數(shù)據(jù)操作請求，所述方法還包括：