[發明專利]數據集群的部署方法、裝置及系統

有效

• 申請號: 202110948981.2
• 申請日: 2021-08-18
• 公開（公告）號: CN113641456B
• 公開（公告）日: 2023-06-13
• 發明（設計）人: 李銘軒;魏進武;張呈宇;博格利;張基恒
• 申請（專利權）人: 中國聯合網絡通信集團有限公司
• 主分類號: G06F9/455
• 分類號: G06F9/455;G06F8/60;G06F9/50
• 代理公司: 北京天昊聯合知識產權代理有限公司 11112
• 代理人: 彭瑞欣;姜春咸

1.一種數據集群的部署方法，其特征在于，包括：

獲取數據集群發送的容器創建請求中包含的標簽信息；

查詢與所述標簽信息相對應的Docker容器創建參數，創建與所述Docker容器創建參數相對應的運行環境；

獲取與所述Docker容器創建參數相匹配的系統資源；

基于所述運行環境以及所述系統資源創建用于運行指定應用實例的Docker容器；

其中，所述獲取數據集群發送的容器創建請求中包含的標簽信息之前，進一步包括：通過集群管理框架提供的接口，申請與所述指定應用實例相對應的虛擬資源；

則所述查詢與所述標簽信息相對應的Docker容器創建參數包括：

查詢注冊表中存儲的與所述標簽信息相對應的Docker容器創建參數；其中，所述標簽信息與所述Docker容器創建參數之間的對應關系基于所述集群管理框架確定；

其中，所述查詢與所述標簽信息相對應的Docker容器創建參數，創建與所述Docker容器創建參數相對應的運行環境包括：

若所述與所述標簽信息相對應的Docker容器創建參數為對應于第一類數據集群的參數，則創建基于所述集群管理框架的Docker運行環境；

若所述與所述標簽信息相對應的Docker容器創建參數為對應于第二類數據集群的參數，則創建基于所述集群管理框架以及YARN框架的Docker運行環境；

其中，所述若所述與所述標簽信息相對應的Docker容器創建參數為對應于第一類數據集群的參數，則創建基于所述集群管理框架的Docker運行環境包括：

根據所述對應于第一類數據集群的參數，確定所述第一類數據集群對應的框架種類；

若所述第一類數據集群的框架種類為第一量級類框架，則創建基于所述集群管理框架的第一Docker運行環境；

若所述第一類數據集群的框架種類為第二量級類框架，則創建基于所述集群管理框架的第二Docker運行環境；

其中，所述第一量級類框架所支持的數據規模小于所述第二量級類框架所支持的數據規模，且所述第一Docker運行環境中的Docker容器型號小于所述第二Docker運行環境中的Docker容器型號。

2.根據權利要求1所述的方法，其特征在于，所述集群管理框架為mesos框架，且所述系統資源進一步包括：服務器資源、文件資源、以及網絡資源。

3.根據權利要求1-2任一所述的方法，其特征在于，所述獲取數據集群發送的容器創建請求中包含的標簽信息包括：通過Kubernetes的監聽機制，監聽數據集群發送的容器創建請求；

并且，所述基于所述運行環境以及所述系統資源創建用于運行指定應用實例的Docker容器之后，進一步包括：針對空閑的Docker容器執行銷毀操作。