[發明專利]數據存儲方法、裝置、計算機設備及存儲介質

在審

• 申請號: 202010025819.9
• 申請日: 2020-01-10
• 公開（公告）號: CN111209282A
• 公開（公告）日: 2020-05-29
• 發明（設計）人: 周霞;申志彬;李如先
• 申請（專利權）人: 深圳前海環融聯易信息科技服務有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/28
• 代理公司: 深圳市精英專利事務所 44242
• 代理人: 蔣學超

本發明實施例公開了一種數據存儲方法、裝置、計算機設備及存儲介質。所述方法包括：將數據以avro存儲格式儲存到數據倉庫的數據基礎層中；將數據以textfile存儲格式儲存到數據倉庫的基礎指標層中；將數據以textfile存儲格式儲存到數據倉庫的應用層中。通過實施本發明實施例的方法可根據數據倉庫各層的數據的特點以不同的格式對數據倉庫各層的數據進行存儲，從而極大地提高了數據倉庫各層的數據獲取的便利性，進而提高了獲取數據的效率以及降低了服務器的功耗。

技術領域

本發明涉及大數據技術領域，尤其涉及一種數據存儲方法、裝置、計算機設備及存儲介質。

背景技術

大數據的數據倉庫一般包括三層，分別為基礎層、基礎指標層以及應用層。在現有的開源社區里，有關于大數據平臺上面的數據倉庫里面每層的數據庫里面的數據的存放都是基于同一種格式存放。由于數據倉庫里面每層的應用不一樣，會導致獲取不同層面的數據的便利性不一致，從而導致取數據的效率低下，服務器的功耗增加。

發明內容

本發明實施例提供了一種數據存儲方法、裝置、計算機設備及存儲介質，旨在解決現有技術中從數據倉庫中獲取數據的便利性差導致獲取數據效率低下以及服務器功耗大的問題。

第一方面，本發明實施例提供了一種數據存儲方法，其包括：

將數據以avro存儲格式儲存到數據倉庫的數據基礎層中；

將數據以textfile存儲格式儲存到數據倉庫的基礎指標層中；

將數據以textfile存儲格式儲存到數據倉庫的應用層中。

其進一步的技術方案為，所述方法還包括：

設置所述數據基礎層中的數據庫的表結構為外表。

其進一步的技術方案為，所述方法還包括：

設置所述基礎指標層中的數據庫的表結構為內表。

其進一步的技術方案為，所述方法還包括：

設置所述應用層中的數據庫的表結構為內表。

其進一步的技術方案為，所述textfile存儲格式中，列與列之間的分隔符為\t；所述textfile存儲格式中，行與行之間的分隔符為\n。

第二方面，本發明實施例還提供了一種數據存儲裝置，其包括：

第一存儲單元，用于將數據以avro存儲格式儲存到數據倉庫的數據基礎層中；

第二存儲單元，用于將數據以textfile存儲格式儲存到數據倉庫的基礎指標層中；

第三存儲單元，用于將數據以textfile存儲格式儲存到數據倉庫的應用層中。

其進一步的技術方案為，所述數據存儲裝置還包括：

第一設置單元，用于設置所述數據基礎層中的數據庫的表結構為外表；

第二設置單元，用于設置所述基礎指標層的數據庫的表結構為內表；

第三設置單元，用于設置所述應用層中的數據庫的表結構為內表。

其進一步的技術方案為，所述textfile存儲格式中，列與列之間的分隔符為\t；所述textfile存儲格式中，行與行之間的分隔符為\n。

第三方面，本發明實施例還提供了一種計算機設備，其包括存儲器及處理器，所述存儲器上存儲有計算機程序，所述處理器執行所述計算機程序時實現上述方法。

第四方面，本發明實施例還提供了一種計算機可讀存儲介質，所述存儲介質存儲有計算機程序，所述計算機程序當被處理器執行時可實現上述方法。