[發(fā)明專利]面向視頻文件大數(shù)據(jù)的RDMA混合傳輸方法、系統(tǒng)及介質

在審

• 申請?zhí)枺?/td>: 202010106040.X
• 申請日: 2020-02-20
• 公開（公告）號: CN111314731A
• 公開（公告）日: 2020-06-19
• 發(fā)明（設計）人: 黃林鵬;鄭圣安;屠要峰;楊洪章;沈艷艷;陳雨亭;舒繼武;陳茂棠
• 申請（專利權）人: 上海交通大學;清華大學
• 主分類號: H04N21/232
• 分類號: H04N21/232;H04N21/238;H04N21/262
• 代理公司: 上海漢聲知識產(chǎn)權代理有限公司 31236
• 代理人: 胡晶

本發(fā)明提供了一種面向視頻文件大數(shù)據(jù)的RDMA混合傳輸方法，包括：步驟1：RDMA初始化建立；步驟2：獲取視頻數(shù)據(jù)請求；步驟3：對視頻數(shù)據(jù)請求進行識別分類；步驟4：對視頻數(shù)據(jù)請求進行傳輸。本發(fā)明針對分布式文件系統(tǒng)下視頻大數(shù)據(jù)傳輸?shù)膯栴}，提供了一種RDMA混合傳輸方法，所述的方法和裝置能夠很好的降低視頻大數(shù)據(jù)傳輸延遲；同時能夠適配分布式非易失性內核態(tài)文件系統(tǒng)，優(yōu)化了分布式系統(tǒng)中視頻流的傳輸過程，具有良好的市場前景和應用價值。

技術領域

本發(fā)明涉及計算機系統(tǒng)結構技術領域，具體地，涉及一種面向視頻文件大數(shù)據(jù)的RDMA混合傳輸方法、系統(tǒng)及介質。

背景技術

遠程直接內存訪問(Remote Direct Memory Access，RDMA)是指在沒有雙方主機操作系統(tǒng)直接參與下，直接訪問遠端內存，從而提供高帶寬、低延遲的特性。

分布式環(huán)境下的數(shù)據(jù)傳輸決定了系統(tǒng)整體的I/O性能，這類技術被廣泛的應用在分布式文件系統(tǒng)和數(shù)據(jù)庫系統(tǒng)中。近年來互聯(lián)網(wǎng)視頻數(shù)據(jù)逐漸增多，而現(xiàn)有的分布式文件系統(tǒng)中，還沒有系統(tǒng)能夠針對視頻流數(shù)據(jù)的實時傳輸特性，進行特異性的傳輸策略設計，很大的影響了用戶的體驗。

RDMA技術的廣泛應用，使得分布式環(huán)境下的數(shù)據(jù)傳輸有了新的解決方案。RDMA的連接方式有三種，分別是可靠連接(Reliable Connections，RC)、不可靠連接(UnreliableConnections，UC)和不可靠數(shù)據(jù)報(Unreliable Datagrams，UD)。現(xiàn)有技術基本是采用了RC或者UD中的一種進行傳輸，沒有辦法充分利用兩種傳輸各自的優(yōu)點。

RDMA：Remote Direct Memory Access，遠程直接內存訪問，是指在沒有雙方主機操作系統(tǒng)直接參與下，直接訪問遠端內存，從而提供高帶寬、低延遲的特性。

Metadata：元數(shù)據(jù)，主要是描述數(shù)據(jù)屬性的信息，又被稱為數(shù)據(jù)的數(shù)據(jù)。

NVM：Non-volatile Memory，非易失性內存，其特點是斷電后信息不丟失，可字節(jié)尋址。

專利文獻CN105657434B(申請?zhí)枺?01610036778.7)公開了一種基于數(shù)模混合的大數(shù)據(jù)輔助視頻傳輸方法，包括步驟：1)基于信噪比最大化的無線視頻傳輸系統(tǒng)，具體可分為：建立偽模擬視頻傳輸框架，基于貝葉斯推理得到接收端重建視頻信號的最小均方誤差估計，最佳先驗知識獲取；2)基于數(shù)模混合的大數(shù)據(jù)輔助視頻傳輸系統(tǒng)的信號發(fā)送端信號發(fā)送；3)基于數(shù)模混合的大數(shù)據(jù)輔助視頻傳輸系統(tǒng)的信號接收端視頻重建。我們假設發(fā)送端與接收端存在相同的云端數(shù)據(jù)，提取大數(shù)據(jù)中與傳輸信號最相關的信息用于輔助視頻重建，通過最大化接收端信噪比提取最佳先驗知識，在發(fā)送端制定相應標準決定是否傳輸原始視頻信號，以節(jié)省傳輸帶寬。

發(fā)明內容

針對現(xiàn)有技術中的缺陷，本發(fā)明的目的是提供一種面向視頻文件大數(shù)據(jù)的RDMA混合傳輸方法、系統(tǒng)及介質。

根據(jù)本發(fā)明提供的面向視頻文件大數(shù)據(jù)的RDMA混合傳輸方法，包括：

步驟1：RDMA初始化建立；

步驟2：獲取視頻數(shù)據(jù)請求；

步驟3：對視頻數(shù)據(jù)請求進行識別分類；

步驟4：對視頻數(shù)據(jù)請求進行傳輸。

優(yōu)選地，所述步驟1包括：

步驟1.1：獲取輸入?yún)?shù)，包括網(wǎng)絡地址和網(wǎng)絡端口；

步驟1.2：對服務端節(jié)點進行地址綁定，并對服務端地址進行解析；

步驟1.3：解析成功后，發(fā)送客戶端和服務端的連接請求；