[發明專利]HDFS容器化服務系統、方法、裝置、設備及存儲介質

有效

• 申請號: 202210257436.3
• 申請日: 2022-03-16
• 公開（公告）號: CN114691357B
• 公開（公告）日: 2022-12-27
• 發明（設計）人: 黃林;黃進軍;林健
• 申請（專利權）人: 東云睿連（武漢）計算技術有限公司
• 主分類號: G06F9/50
• 分類號: G06F9/50
• 代理公司: 武漢智正誠專利代理事務所(普通合伙) 42278
• 代理人: 李衛

本申請公開了一種HDFS容器化服務系統、方法、裝置、設備及存儲介質，屬于大數據處理技術領域。本申請通過接收容器化的HDFS系統創建指令，調用第一預設配置模板，生成第一配置文件，并將第一配置文件發送至存儲集群，以使存儲集群根據第一配置文件，在本地存儲中分配指定大小的存儲空間，并使用對應的存儲空間創建容器化的HDFS系統，從而實現根據配置文件動態分配存儲空間，并且由于使用了本地存儲作為文件存儲空間，進而實現提供了一個靈活高效的HDFS的容器存儲服務，大大提升用戶的體驗。

技術領域

本申請涉及大數據處理技術領域，尤其涉及一種HDFS容器化服務系統、方法、裝置、設備及存儲介質。

背景技術

近年來，隨著計算機技術的發展，大數據運用技術在以互聯網為代表的行業中得到了廣泛的應用，越來越多的研究和應用領域都在大數據處理技術中得到支撐。并且在現在的發展趨勢中我們可以看出，未來各行各業中，大數據運用的技術一定會給我們的生活帶來革命性的影響。

而在大數據應用環境下，大數據的存儲顯得尤為重要，針對于各種不同場景的數據存儲需求和大規模數據處理，對于數據存儲的高效以及靈活性的需求也越來越大。

在傳統的大數據存儲中，是以分布式文件系統做HDFS存儲的，而其帶來的問題也突顯出來，虛擬化和層疊存儲系統開銷大、性能不足，并且容器的容量受限，而在容器中掛載本地文件系統，又使得存儲空間的生命周期的管理復雜且存儲空間大小分配不靈活。因此，如何解決容器化存儲空間配置不靈活是我們亟待解決的問題。

上述內容僅用于輔助理解本申請的技術方案，并不代表承認上述內容是現有技術。

發明內容

為解決上述技術問題，本申請提出了一種分布式文件系統(HDFS)容器化服務系統、方法、裝置、設備及存儲介質。在該方法中，通過基于云原生的HDFS容器管理系統接收容器化的HDFS系統創建指令，調用第一預設配置模板，生成對應的第一配置文件，并將第一配置文件發送給存儲集群，從而存儲集群根據第一配置文件創建容器化的HDFS系統，這樣使得用戶可以通過配置文件快速創建容器化的HDFS系統，大大的增加了容器化存儲空間配置的靈活性，從而提升了用戶體驗。