[發(fā)明專利]一種數(shù)據(jù)處理方法及電子設(shè)備

有效

• 申請?zhí)枺?/td>: 201911373464.6
• 申請日: 2019-12-27
• 公開（公告）號: CN111163158B
• 公開（公告）日: 2022-02-25
• 發(fā)明（設(shè)計）人: 柯克
• 申請（專利權(quán)）人: 聯(lián)想（北京）有限公司
• 主分類號: H04L67/568
• 分類號: H04L67/568;H04L67/06;H04L47/62;G06F9/50
• 代理公司: 北京金信知識產(chǎn)權(quán)代理有限公司 11225
• 代理人: 韓岳松

本申請公開了一種數(shù)據(jù)處理方法及電子設(shè)備，用以提高系統(tǒng)整體性能。所述方法包括：通過預(yù)先建立的RDMA協(xié)議棧輪詢本地的所有緩沖區(qū)的RDMA網(wǎng)絡(luò)數(shù)據(jù)；在輪詢到緩沖區(qū)內(nèi)存在RDMA網(wǎng)絡(luò)數(shù)據(jù)的情況下，生成與所述RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)；將所述與RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)添加到任務(wù)隊列中；對所述任務(wù)隊列進(jìn)行輪詢；在輪詢到所述任務(wù)隊列中存在與RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)的情況下，執(zhí)行所述與RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)。采用本申請所提供的方案，避免了在任務(wù)處理過程中產(chǎn)生大量線程，從而提高了系統(tǒng)整體性能。

技術(shù)領(lǐng)域

本申請涉及計算機(jī)領(lǐng)域，特別涉及一種數(shù)據(jù)處理方法及電子設(shè)備。

背景技術(shù)

隨著科學(xué)技術(shù)的發(fā)展，服務(wù)器所要處理的任務(wù)數(shù)目越來越龐大，例如，視頻網(wǎng)站、文檔分享平臺這些提供數(shù)據(jù)分享功能的服務(wù)器，就需要處理大量的下載任務(wù)和上傳任務(wù)。

傳統(tǒng)的提供數(shù)據(jù)分享功能的服務(wù)器所使用的共享系統(tǒng)，通常都是采用多線程方式進(jìn)行數(shù)據(jù)共享的，例如，CIFS(Common Internet File System，通用Internet文件系統(tǒng))，對多條任務(wù)進(jìn)行處理時，會將多條任務(wù)分配給多個線程進(jìn)行處理，甚至將任務(wù)拆分成更小的子任務(wù)，為每一條子任務(wù)分配一個線程。這樣的方式，雖然能夠均衡任務(wù)的響應(yīng)時間，但是也會帶來很多弊端，例如，這樣的方式，會產(chǎn)生大量的線程，操作系統(tǒng)需要在大量的線程之間來回切換，而且切換過程就需要額外消耗計算資源；并且，大量的線程需要額外占用大量的內(nèi)存空間資源；在線程中止時，需要考慮其對程序運行的影響，以及需要防止線程死鎖情況的發(fā)生，也需要浪費大量的計算資源來進(jìn)行調(diào)度。因此，這種多線程的任務(wù)處理方式，會額外消耗計算資源，且會占用大量的內(nèi)存空間，影響系統(tǒng)的整體性能。

因此，亟需提出一種方案，用于避免在任務(wù)處理過程中產(chǎn)生大量線程，從而提高系統(tǒng)整體性能。基于上述技術(shù)問題，本發(fā)明旨在基于RDMA(Remote Direct Memory Access，遠(yuǎn)程直接數(shù)據(jù)存取)技術(shù)實現(xiàn)對如CIFS或類似的文件共享系統(tǒng)的改進(jìn)，使得文件共享系統(tǒng)中的讀寫任務(wù)能夠通過預(yù)先建立的RDMA協(xié)議棧處理全部的讀寫任務(wù)，避免產(chǎn)生大量的線程，提高系統(tǒng)整體性能。

發(fā)明內(nèi)容

本申請實施例的目的在于提供一種數(shù)據(jù)處理方法及電子設(shè)備，用以提高系統(tǒng)整體性能。

為了解決上述技術(shù)問題，本申請的實施例采用了如下技術(shù)方案：一種數(shù)據(jù)處理方法，包括：

通過預(yù)先建立的RDMA協(xié)議棧輪詢本地的所有緩沖區(qū)的RDMA網(wǎng)絡(luò)數(shù)據(jù)；

在輪詢到緩沖區(qū)內(nèi)存在RDMA網(wǎng)絡(luò)數(shù)據(jù)的情況下，生成與所述RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)；

將所述與RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)添加到任務(wù)隊列中；

對所述任務(wù)隊列進(jìn)行輪詢；

在輪詢到所述任務(wù)隊列中存在與RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)的情況下，執(zhí)行所述與RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)。

本申請的有益效果在于：對緩沖區(qū)內(nèi)RDMA網(wǎng)絡(luò)數(shù)據(jù)的輪詢的操作，生成讀寫任務(wù)的操作；將讀寫任務(wù)添加到任務(wù)隊列中的操作；對任務(wù)隊列進(jìn)行輪詢的操作；以及執(zhí)行任務(wù)隊列中的讀寫任務(wù)的操作，都是由RDMA協(xié)議棧實現(xiàn)的，因此，并沒有通過多線程來執(zhí)行上述操作，以及通過多線程方式執(zhí)行多個任務(wù)，因此，避免了在任務(wù)處理過程中產(chǎn)生大量線程，從而提高了系統(tǒng)整體性能。

在一個實施例中，所述生成與所述RDMA網(wǎng)絡(luò)數(shù)據(jù)對應(yīng)的讀寫任務(wù)，包括：

在所述RDMA網(wǎng)絡(luò)數(shù)據(jù)為RDMA讀請求的情況下，提取所述RDMA讀請求中攜帶的文件標(biāo)識；

根據(jù)所述文件標(biāo)識生成文件讀取任務(wù)。

本實施例的有益效果在于：能夠根據(jù)RDMA讀請求中攜帶的文件標(biāo)識自動生成設(shè)備可執(zhí)行的文件讀取任務(wù)，從而實現(xiàn)對RDMA讀請求的響應(yīng)。