[發(fā)明專利]大數(shù)據(jù)平臺(tái)快速部署方法、存儲(chǔ)介質(zhì)、電子設(shè)備及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201811475906.3
• 申請(qǐng)日: 2018-12-04
• 公開（公告）號(hào): CN109656575A
• 公開（公告）日: 2019-04-19
• 發(fā)明（設(shè)計(jì)）人: 張傲;荊楠;李毅;張一帆
• 申請(qǐng)（專利權(quán)）人: 武漢烽火信息集成技術(shù)有限公司
• 主分類號(hào): G06F8/61
• 分類號(hào): G06F8/61
• 代理公司: 武漢智權(quán)專利代理事務(wù)所(特殊普通合伙) 42225
• 代理人: 王維

本發(fā)明公開了一種大數(shù)據(jù)平臺(tái)快速部署方法、存儲(chǔ)介質(zhì)、電子設(shè)備及系統(tǒng)，涉及大數(shù)據(jù)技術(shù)領(lǐng)域，該方法包括：制作多個(gè)鏡像文件；向Heat組件添加平臺(tái)配置信息，平臺(tái)配置信息為主機(jī)集群中各主機(jī)的設(shè)備信息；編寫平臺(tái)編排模板，并上傳至Openstack云空間；根據(jù)平臺(tái)配置信息，獲得平臺(tái)部署信息；解析平臺(tái)編排模板，并根據(jù)平臺(tái)部署信息進(jìn)行Openstack平臺(tái)部署。本發(fā)明利用OpenStack平臺(tái)，能夠快速部署大數(shù)據(jù)分析平臺(tái)，提高部署效率，為工作人員的部署工作提供便利。

技術(shù)領(lǐng)域

本發(fā)明涉及大數(shù)據(jù)技術(shù)領(lǐng)域，具體涉及一種大數(shù)據(jù)平臺(tái)快速部署方法、存儲(chǔ)介質(zhì)、電子設(shè)備及系統(tǒng)。

背景技術(shù)

在傳統(tǒng)的大數(shù)據(jù)分析計(jì)算場(chǎng)景下，大數(shù)據(jù)平臺(tái)的部署需要大量的開源軟件安裝及配置，如分布式系統(tǒng)基礎(chǔ)架構(gòu)Hadoop、Zookeeper、Hive、HBase等；

通常情況下，傳統(tǒng)的大數(shù)據(jù)分析平臺(tái)的搭建需要大量的軟件安裝及配置，具體為用戶需要手動(dòng)安裝OS(操作系統(tǒng))及配置大量的開源軟件來(lái)部署大數(shù)據(jù)分析平臺(tái)，還需要額外安裝管理和監(jiān)控軟件來(lái)管理整套環(huán)境的工作狀態(tài)，傳統(tǒng)的部署工序操作繁瑣，效率低下

因此，急需一種新的大數(shù)據(jù)平臺(tái)快速部署方法，為工作人員的部署工作提供便利。

發(fā)明內(nèi)容

針對(duì)現(xiàn)有技術(shù)中存在的缺陷，本發(fā)明的目的在于提供一種大數(shù)據(jù)平臺(tái)快速部署方法,利用OpenStack平臺(tái)，能夠快速部署大數(shù)據(jù)分析平臺(tái)，提高部署效率，為工作人員的部署工作提供便利。

為達(dá)到以上目的，本發(fā)明采取的技術(shù)方案是：

第一方面，本發(fā)明提供一種大數(shù)據(jù)平臺(tái)快速部署方法，其包括以下步驟：

制作多個(gè)鏡像文件；

向Heat組件添加平臺(tái)配置信息，所述平臺(tái)配置信息為主機(jī)集群中各主機(jī)的設(shè)備信息；

編寫平臺(tái)編排模板，并上傳至Openstack云空間；

根據(jù)所述平臺(tái)配置信息，獲得平臺(tái)部署信息；

解析所述平臺(tái)編排模板，并根據(jù)所述平臺(tái)部署信息進(jìn)行Openstack平臺(tái)部署。

在上述技術(shù)方案的基礎(chǔ)上，該方法的所述鏡像文件至少包括：

Hadoop集群主節(jié)點(diǎn)鏡像文件、Hadoop集群備節(jié)點(diǎn)鏡像文件、Hadoop集群數(shù)據(jù)節(jié)點(diǎn)鏡像文件、Hadoop集群數(shù)據(jù)節(jié)點(diǎn)鏡像文件、Kafka集群主節(jié)點(diǎn)鏡像文件、Kafka集群從節(jié)點(diǎn)鏡像文件、Storm集群主節(jié)點(diǎn)鏡像文件以及Storm集群備節(jié)點(diǎn)鏡像文件。

在上述技術(shù)方案的基礎(chǔ)上，該方法還包括監(jiān)控步驟，所述監(jiān)控步驟包括：

預(yù)設(shè)一監(jiān)控組件，所述監(jiān)控組件用于監(jiān)控所述Openstack平臺(tái)。

在上述技術(shù)方案的基礎(chǔ)上，該方法的所述監(jiān)控組件包括多個(gè)監(jiān)控項(xiàng)，所述監(jiān)控項(xiàng)至少包括：系統(tǒng)CPU利用率、內(nèi)存使用率、內(nèi)存使用量、磁盤讀寫操作速率、磁盤讀寫速率，網(wǎng)絡(luò)流入流出速率以及網(wǎng)絡(luò)流入流出包速率。

在上述技術(shù)方案的基礎(chǔ)上，該方法的所述監(jiān)控組件為gnocchi組件。

第二方面，本發(fā)明還提供一種存儲(chǔ)介質(zhì)，該存儲(chǔ)介質(zhì)上存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述第一方面的大數(shù)據(jù)平臺(tái)快速部署方法。

第三方面，本發(fā)明還提供一種電子設(shè)備，包括存儲(chǔ)器和處理器，存儲(chǔ)器上儲(chǔ)存有在處理器上運(yùn)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)上述第一方面的大數(shù)據(jù)平臺(tái)快速部署方法。

第四方面，本發(fā)明還提供一種大數(shù)據(jù)平臺(tái)快速部署系統(tǒng)，其包括：

鏡像文件制作單元，其用于制作多個(gè)鏡像文件；