[發(fā)明專利]一種海量數(shù)據(jù)高效傳輸方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201710467056.1
• 申請(qǐng)日: 2017-06-19
• 公開（公告）號(hào): CN107070958B
• 公開（公告）日: 2020-02-21
• 發(fā)明（設(shè)計(jì)）人: 陳哲;王吉星;王慧斌;石愛業(yè);李臣明;彭建華;徐立中
• 申請(qǐng)（專利權(quán)）人: 河海大學(xué);水利部南京水利水文自動(dòng)化研究所
• 主分類號(hào): H04L29/06
• 分類號(hào): H04L29/06
• 代理公司: 南京蘇高專利商標(biāo)事務(wù)所(普通合伙) 32204
• 代理人: 李玉平

1.一種海量數(shù)據(jù)高效傳輸方法，其特征在于，建立高速報(bào)文傳輸通道，數(shù)據(jù)經(jīng)過NP直接通過內(nèi)部以太網(wǎng)交互通道投送到APP的PM收發(fā)包線程；

1)高速報(bào)文通道的建立方式是數(shù)據(jù)通過NP后，使用TCP/IP協(xié)議，通過socket通道，進(jìn)入內(nèi)部以太網(wǎng)交互通道，然后直接進(jìn)入到APP的PM收發(fā)包線程，這樣數(shù)據(jù)通過最短路徑直接到達(dá)應(yīng)用層，供應(yīng)用層軟件使用；

2)在報(bào)文轉(zhuǎn)發(fā)過程中，微碼根據(jù)報(bào)文分發(fā)表決定協(xié)議報(bào)文路徑，也就是微碼根據(jù)報(bào)文分發(fā)表選擇報(bào)文是走Socket通道還是高速報(bào)文通道，通過這種方式實(shí)現(xiàn)報(bào)文分發(fā)兼容原報(bào)文分發(fā)邏輯，具體選擇路徑方式為：報(bào)文在傳送前，在微碼中添加報(bào)文路徑標(biāo)志字節(jié)，在報(bào)文分發(fā)表中添加對(duì)應(yīng)的報(bào)文路徑標(biāo)志字節(jié)對(duì)應(yīng)的報(bào)文路徑，微碼使用這個(gè)標(biāo)志字節(jié)，結(jié)合報(bào)文分發(fā)表，決定報(bào)文數(shù)據(jù)路徑；

3)微碼上報(bào)報(bào)文到網(wǎng)口，應(yīng)用進(jìn)程(APP)使用套口在網(wǎng)口上收包；

對(duì)不同進(jìn)程或不同協(xié)議，微碼對(duì)上送報(bào)文封裝不同的estype類型，不同進(jìn)程根據(jù)不同的estype類型創(chuàng)建不同的套口實(shí)現(xiàn)分布式收包；同時(shí)也使用不同estype類型的報(bào)文相互隔離來實(shí)現(xiàn)不同進(jìn)程間的分布式網(wǎng)口收包；

4)修改內(nèi)核網(wǎng)口收包驅(qū)動(dòng)，將收包的環(huán)形buffer映射到用戶態(tài)，在用戶態(tài)啟動(dòng)收包線程直接讀取收包緩存進(jìn)行收包。

2.如權(quán)利要求1所述的海量數(shù)據(jù)高效傳輸方法，其特征在于，微碼上報(bào)報(bào)文到網(wǎng)口，應(yīng)用進(jìn)程(APP)使用套口在網(wǎng)口上收包；

對(duì)不同進(jìn)程或不同協(xié)議，微碼對(duì)上送報(bào)文封裝不同的estype類型，不同進(jìn)程根據(jù)不同的estype類型創(chuàng)建不同的套口實(shí)現(xiàn)分布式收包；同時(shí)也使用不同estype類型的報(bào)文相互隔離來實(shí)現(xiàn)不同進(jìn)程間的分布式網(wǎng)口收包，具體實(shí)現(xiàn)方式為：微碼在上送報(bào)文頭中添加一個(gè)字節(jié)，這個(gè)字節(jié)的值代表不同的estype類型，APP通過套口收到報(bào)文后解析獲得這個(gè)estype，然后根據(jù)estype值創(chuàng)建接收線程，把包含相同estype值的報(bào)文數(shù)據(jù)包送到同一個(gè)收包線程中供該線程處理來實(shí)現(xiàn)報(bào)文相互隔離的處理。

3.如權(quán)利要求1所述的海量數(shù)據(jù)高效傳輸方法，其特征在于，修改內(nèi)核網(wǎng)口收包驅(qū)動(dòng)，將收包的環(huán)形buffer映射到用戶態(tài)，在用戶態(tài)啟動(dòng)收包線程直接讀取收包緩存進(jìn)行收包，具體實(shí)現(xiàn)方式為：在系統(tǒng)內(nèi)存中創(chuàng)建一張收包環(huán)形buffer地址指針與用戶態(tài)標(biāo)志的映射表，用戶態(tài)啟動(dòng)收包線程時(shí)，根據(jù)用戶態(tài)標(biāo)志從該映射表中讀取環(huán)形buffer的地址，然后直接從該地址獲取數(shù)據(jù)來實(shí)現(xiàn)數(shù)據(jù)包的讀取。