[發(fā)明專利]大數(shù)據(jù)平臺(tái)的FTP-Transport傳輸創(chuàng)建方法、系統(tǒng)、終端及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010380550.6
• 申請(qǐng)日: 2020-05-08
• 公開（公告）號(hào): CN111698286A
• 公開（公告）日: 2020-09-22
• 發(fā)明（設(shè)計(jì)）人: 李恒
• 申請(qǐng)（專利權(quán)）人: 蘇州浪潮智能科技有限公司
• 主分類號(hào): H04L29/08
• 分類號(hào): H04L29/08;G06F16/13;G06F16/182;G06F16/25;G06F16/28;H04L29/06
• 代理公司: 濟(jì)南舜源專利事務(wù)所有限公司 37205
• 代理人: 孫玉營

1.一種大數(shù)據(jù)平臺(tái)的FTP-Transport傳輸創(chuàng)建方法，其特征在于，包括：

開通大數(shù)據(jù)平臺(tái)的安全通信協(xié)議；

創(chuàng)建分布式文件系統(tǒng)數(shù)據(jù)節(jié)點(diǎn)的源文件目錄，創(chuàng)建分布式文件系統(tǒng)目錄并創(chuàng)建數(shù)據(jù)倉庫工具數(shù)據(jù)表；

校驗(yàn)并確認(rèn)具有通過工作節(jié)點(diǎn)安全外殼協(xié)議的權(quán)限；

添加文件服務(wù)并通過文件服務(wù)創(chuàng)建工作節(jié)點(diǎn)經(jīng)分布式文件系統(tǒng)到所述數(shù)據(jù)倉庫工具的通道；

通過所述通道將工作節(jié)點(diǎn)的數(shù)據(jù)上傳至數(shù)據(jù)倉庫工具數(shù)據(jù)表。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述開通大數(shù)據(jù)平臺(tái)的安全通信協(xié)議，包括：

在大數(shù)據(jù)平臺(tái)的安全通信服務(wù)節(jié)點(diǎn)開通安全通信協(xié)議，所述安全通信協(xié)議為FTP、FTPS和SFTP協(xié)議中的任意一種；

在大數(shù)據(jù)平臺(tái)的安全通信服務(wù)節(jié)點(diǎn)添加安全通信使用賬戶；

創(chuàng)建安全通信服務(wù)組件的存儲(chǔ)數(shù)據(jù)庫。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述創(chuàng)建分布式文件系統(tǒng)數(shù)據(jù)節(jié)點(diǎn)的源文件路徑，包括：

通過所述安全通信使用賬戶在大數(shù)據(jù)平臺(tái)的數(shù)據(jù)節(jié)點(diǎn)創(chuàng)建源目錄，所述安全通信使用賬戶具備創(chuàng)建源目錄的權(quán)限。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述校驗(yàn)并確認(rèn)具有通過工作節(jié)點(diǎn)安全外殼協(xié)議的權(quán)限，包括

判斷所述工作節(jié)點(diǎn)是否屬于所述大數(shù)據(jù)平臺(tái)集群：

若否，則獲取所述工作節(jié)點(diǎn)的安全外殼協(xié)議授權(quán)并在所述工作節(jié)點(diǎn)安裝安全通信文件包。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述通過文件服務(wù)創(chuàng)建工作節(jié)點(diǎn)經(jīng)分布式文件系統(tǒng)到所述數(shù)據(jù)倉庫工具的通道，包括：

根據(jù)工作節(jié)點(diǎn)IP、中間節(jié)點(diǎn)IP、源文件目錄路徑、分布式文件系統(tǒng)目錄路徑和數(shù)據(jù)倉庫工具數(shù)據(jù)表路徑，構(gòu)建由工作節(jié)點(diǎn)、中間節(jié)點(diǎn)、分布式文件系統(tǒng)和數(shù)據(jù)倉庫工具數(shù)據(jù)表依次組成的通道。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

從工作節(jié)點(diǎn)上傳與數(shù)據(jù)倉庫工具數(shù)據(jù)表結(jié)構(gòu)一致的源數(shù)據(jù)；

登錄數(shù)據(jù)倉庫工具查看是否存在所述源數(shù)據(jù)：

若是，則判定大數(shù)據(jù)平臺(tái)的FTP-Transport傳輸創(chuàng)建成功；

若否，則判定大數(shù)據(jù)平臺(tái)的FTP-Transport傳輸創(chuàng)建失敗。

7.一種大數(shù)據(jù)平臺(tái)的FTP-Transport傳輸創(chuàng)建系統(tǒng)，其特征在于，包括：

協(xié)議開通單元，配置用于開通大數(shù)據(jù)平臺(tái)的安全通信協(xié)議；

基礎(chǔ)創(chuàng)建單元，配置用于創(chuàng)建分布式文件系統(tǒng)數(shù)據(jù)節(jié)點(diǎn)的源文件目錄，創(chuàng)建分布式文件系統(tǒng)目錄并創(chuàng)建數(shù)據(jù)倉庫工具數(shù)據(jù)表；

節(jié)點(diǎn)校驗(yàn)單元，配置用于校驗(yàn)并確認(rèn)具有通過工作節(jié)點(diǎn)安全外殼協(xié)議的權(quán)限；

通道創(chuàng)建單元，配置用于添加文件服務(wù)并通過文件服務(wù)創(chuàng)建工作節(jié)點(diǎn)經(jīng)分布式文件系統(tǒng)到所述數(shù)據(jù)倉庫工具的通道；

數(shù)據(jù)上傳單元，配置用于通過所述通道將工作節(jié)點(diǎn)的數(shù)據(jù)上傳至數(shù)據(jù)倉庫工具數(shù)據(jù)表。

8.根據(jù)權(quán)利要求6所述的系統(tǒng)，其特征在于，所述通道創(chuàng)建單元包括：

通道創(chuàng)建模塊，配置用于根據(jù)工作節(jié)點(diǎn)IP、中間節(jié)點(diǎn)IP、源文件目錄路徑、分布式文件系統(tǒng)目錄路徑和數(shù)據(jù)倉庫工具數(shù)據(jù)表路徑，構(gòu)建由工作節(jié)點(diǎn)、中間節(jié)點(diǎn)、分布式文件系統(tǒng)和數(shù)據(jù)倉庫工具數(shù)據(jù)表依次組成的通道。

9.一種終端，其特征在于，包括：

處理器；

用于存儲(chǔ)處理器的執(zhí)行指令的存儲(chǔ)器；

其中，所述處理器被配置為執(zhí)行權(quán)利要求1-6任一項(xiàng)所述的方法。

10.一種存儲(chǔ)有計(jì)算機(jī)程序的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，該程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-6中任一項(xiàng)所述的方法。