[發(fā)明專利]一種面向數(shù)據(jù)挖掘的容器化數(shù)據(jù)探索隔離區(qū)及其使用方法

有效

• 申請(qǐng)?zhí)枺?/td>: 202010189150.7
• 申請(qǐng)日: 2020-03-18
• 公開(kāi)（公告）號(hào): CN111400374B
• 公開(kāi)（公告）日: 2023-05-23
• 發(fā)明（設(shè)計(jì)）人: 王臻;趙龍軍
• 申請(qǐng)（專利權(quán)）人: 中國(guó)雄安集團(tuán)數(shù)字城市科技有限公司
• 主分類號(hào): G06F16/2458
• 分類號(hào): G06F16/2458;G06F16/27;G06F16/28;G06F16/245;G06F9/455;H04L9/40
• 代理公司: 北京科億知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11350
• 代理人: 李興林

本發(fā)明提出一種面向數(shù)據(jù)挖掘的容器化數(shù)據(jù)探索隔離區(qū)，包括數(shù)據(jù)集成模塊、數(shù)據(jù)倉(cāng)庫(kù)模塊、鏡像倉(cāng)庫(kù)模塊、基于Kubernets的容器開(kāi)發(fā)環(huán)境和知識(shí)共享模塊，數(shù)據(jù)集成模塊與外部數(shù)據(jù)源和數(shù)據(jù)倉(cāng)庫(kù)模塊連接并進(jìn)行數(shù)據(jù)交互，數(shù)據(jù)倉(cāng)庫(kù)模塊與基于Kubernets的容器開(kāi)發(fā)環(huán)境和知識(shí)共享模塊以及數(shù)據(jù)集成模塊連接并進(jìn)行數(shù)據(jù)交互；知識(shí)共享模塊與外部應(yīng)用連接并進(jìn)行數(shù)據(jù)交互；基于Kubernets的容器開(kāi)發(fā)環(huán)境與數(shù)據(jù)倉(cāng)庫(kù)模塊、鏡像倉(cāng)庫(kù)模塊和Web瀏覽器連接并進(jìn)行數(shù)據(jù)交互。還提出一種上述容器化數(shù)據(jù)探索隔離區(qū)的使用方法。本發(fā)明解決了數(shù)據(jù)探索隔離區(qū)的數(shù)據(jù)挖掘與共享問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)探索隔離區(qū)領(lǐng)域，尤其涉及面向數(shù)據(jù)挖掘的容器化數(shù)據(jù)探索隔離區(qū)及其使用方法。

背景技術(shù)

探索隔離區(qū)(Demilitarized?Zone，縮寫為DMZ)，也稱為非軍事化區(qū)，是為了解決設(shè)置了防火墻之后外部網(wǎng)絡(luò)不能訪問(wèn)內(nèi)部網(wǎng)絡(luò)服務(wù)器的問(wèn)題而設(shè)置的，探索隔離區(qū)是位于非安全系統(tǒng)與安全系統(tǒng)或企業(yè)內(nèi)部網(wǎng)絡(luò)和外部網(wǎng)絡(luò)之間的網(wǎng)絡(luò)區(qū)域，是為了給內(nèi)部網(wǎng)絡(luò)放置一些必須對(duì)外公開(kāi)的服務(wù)器設(shè)施而劃分的一個(gè)緩沖區(qū)。探索隔離區(qū)技術(shù)重點(diǎn)解決網(wǎng)絡(luò)安全問(wèn)題，探索隔離區(qū)使用防火墻技術(shù)隔離出一個(gè)網(wǎng)絡(luò)安全區(qū)域，保護(hù)該區(qū)域數(shù)據(jù)和服務(wù)的網(wǎng)絡(luò)安全。

現(xiàn)有技術(shù)的探索隔離區(qū)(DMZ)主要用來(lái)在對(duì)外提供安全的HTTP、FTP、SSH、SMTP等服務(wù)，同時(shí)，這種網(wǎng)絡(luò)部署比起一般的防火墻方案，對(duì)攻擊者來(lái)說(shuō)又多了一道關(guān)卡，通過(guò)這樣一個(gè)探索隔離區(qū)(DMZ)能更加有效地保護(hù)了內(nèi)部網(wǎng)絡(luò)，是為內(nèi)部網(wǎng)絡(luò)放置一些必須對(duì)外公開(kāi)的服務(wù)器設(shè)施而劃分的一個(gè)緩沖區(qū)。

探索隔離區(qū)(DMZ)的網(wǎng)絡(luò)結(jié)構(gòu)如圖1所示，包括依次連接并進(jìn)行數(shù)據(jù)交互的局域網(wǎng)、防火墻1、路由器1、防火墻2和Internet，還包括與路由器1連接并進(jìn)行數(shù)據(jù)交互的探索隔離區(qū)，探索隔離區(qū)包括Web服務(wù)器、業(yè)務(wù)服務(wù)器和數(shù)據(jù)庫(kù)。然而，隨著對(duì)網(wǎng)絡(luò)訪問(wèn)需求以及用戶使用功能的增加，在數(shù)據(jù)挖掘過(guò)程中，往往需要代碼開(kāi)發(fā)環(huán)境來(lái)進(jìn)行數(shù)據(jù)挖掘算法開(kāi)發(fā)和調(diào)試，并且需要為開(kāi)發(fā)環(huán)境配置數(shù)據(jù)挖掘所需的代碼運(yùn)行依賴環(huán)境，以保證編寫的代碼能夠正常穩(wěn)定運(yùn)行。現(xiàn)有探索隔離區(qū)只提供網(wǎng)絡(luò)安全隔離區(qū)，沒(méi)有提供適用于數(shù)據(jù)挖掘的算法開(kāi)發(fā)和數(shù)據(jù)分析工具，不適用于數(shù)據(jù)挖掘相關(guān)功能，不能滿足數(shù)據(jù)挖掘需求。

針對(duì)這一情況，本發(fā)明在傳統(tǒng)的探索隔離區(qū)提供網(wǎng)絡(luò)安全環(huán)境的基礎(chǔ)上，針對(duì)數(shù)據(jù)挖掘需求，使用Jupyter?Notebook作為數(shù)據(jù)挖掘和算法開(kāi)發(fā)工具，并基于Docker容器虛擬化技術(shù)和Kubernetes容器編排技術(shù)實(shí)現(xiàn)容器化JupyterNotebook開(kāi)發(fā)環(huán)境。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明提出一種面向數(shù)據(jù)挖掘的容器化數(shù)據(jù)探索隔離區(qū)，旨在解決現(xiàn)有技術(shù)中數(shù)據(jù)探索隔離區(qū)無(wú)法適用于數(shù)據(jù)挖掘、不能滿足數(shù)據(jù)挖掘需求和數(shù)據(jù)共享的問(wèn)題。

根據(jù)本發(fā)明的第一方面，提出了一種面向數(shù)據(jù)挖掘的容器化數(shù)據(jù)探索隔離區(qū)，

包括數(shù)據(jù)集成模塊、數(shù)據(jù)倉(cāng)庫(kù)模塊、鏡像倉(cāng)庫(kù)模塊、基于Kubernets的容器開(kāi)發(fā)環(huán)境和知識(shí)共享模塊；所述數(shù)據(jù)集成模塊一方面與外部數(shù)據(jù)源連接并進(jìn)行數(shù)據(jù)交互，且所述數(shù)據(jù)集成模塊另一方面與所述數(shù)據(jù)倉(cāng)庫(kù)模塊連接并進(jìn)行數(shù)據(jù)交互；所述數(shù)據(jù)倉(cāng)庫(kù)模塊一方面與所述基于Kubernets的容器開(kāi)發(fā)環(huán)境連接并進(jìn)行數(shù)據(jù)交互，另一方面與所述知識(shí)共享模塊連接并進(jìn)行數(shù)據(jù)交互，同時(shí)還與所述數(shù)據(jù)集成模塊連接并進(jìn)行數(shù)據(jù)交互；所述知識(shí)共享模塊與所述外部應(yīng)用連接并進(jìn)行數(shù)據(jù)交互；所述基于Kubernets的容器開(kāi)發(fā)環(huán)境一方面與所述數(shù)據(jù)倉(cāng)庫(kù)模塊連接并進(jìn)行數(shù)據(jù)交互，另一方面與所述鏡像倉(cāng)庫(kù)模塊連接并進(jìn)行數(shù)據(jù)交互，同時(shí)還與Web瀏覽器進(jìn)行連接和數(shù)據(jù)交互。

在其中一個(gè)實(shí)施例中，所述數(shù)據(jù)探索隔離區(qū)中創(chuàng)建有容器化JupyterNotebook開(kāi)發(fā)環(huán)境。

在其中一個(gè)實(shí)施例中，所述容器化Jupyter?Notebook開(kāi)發(fā)環(huán)境包括OAuth2訪問(wèn)授權(quán)代理、ISTIO網(wǎng)關(guān)、系統(tǒng)命名空間和用戶命名空間，其中所述OAuth2訪問(wèn)授權(quán)代理與ISTIO網(wǎng)關(guān)連接，所述ISTIO網(wǎng)關(guān)分別與系統(tǒng)命名空間和用戶命名空間連接。