[發明專利]一種文具大數據分布式存儲系統

在審

• 申請號: 201710408492.1
• 申請日: 2017-06-02
• 公開（公告）號: CN107291846A
• 公開（公告）日: 2017-10-24
• 發明（設計）人: 陳欽鵬
• 申請（專利權）人: 深圳齊心集團股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 深圳市科冠知識產權代理有限公司44355
• 代理人: 王海駿

技術領域

本發明屬于大數據存儲技術領域，尤其涉及文具大數據分布式存儲系統。

背景技術

隨著信息科技的不斷發展，人們的生活已經離不開數據信息，例如，在工作中需要通過數據信息來記錄工作的進程等；在生活中如網絡購物等，也都需要通過數據信息來進行操作、記錄。這就使得數據信息的高效管理成為了一項發展的熱點。目前，由于越來越多的人們、企業運用數據信息，使得數據信息的數量越來越多，普通的數據信息處理裝置已經漸漸地不能夠滿足使用需求，然而，大數據信息處理裝置的成本較高，如果全部更換大數據處理裝置的話，會使得個人或企業需要花費較多的成本進行設備的更換。

另一方面，隨著計算機產業發展，人們對電腦的性能要求越來越高，傳統的機械硬盤因為其固有的機械特性，造成速度無法進一步提高，其性能已經是整個電腦的瓶頸，所以固態硬盤以優越的讀寫和IOPS性能，慢慢的進入了人們的生活。

發明內容

本發明實施例提供一種文具大數據分布式存儲系統，能夠實現對文具大數據的分布式處理，并且數據傳輸穩定。

本發明實施例是這樣實現的，一種文具大數據分布式存儲系統，包括：

文具數據分布存儲模塊；

文具數據的分層劃分及與存儲節點間的映射配置模塊；

文具數據分布管理模塊；

所述文具數據分布存儲模塊，由一組存儲節點，通過網絡互聯，對外作為一個整體提供存儲服務的模塊；

所述映射配置模塊，實現文具數據的分層劃分及其與存儲節點間的映射配置；

所述文具數據分布管理模塊實現文具數據存儲的分布管理，所述文具數據的分布管理包括：文具數據存儲模塊和文具數據刪除模塊。

優選地，所述文具數據分布存儲模塊用于實現如下步驟：

文具數據的分層劃分：將文具數據中的按照地區-＞子地區-＞廠站或線路之間的關聯關系進行層次劃分；

文具數據的分層劃分、文具數據的分層劃分與存儲節點間的映射配置：將地區與地區、廠站或線路與文具數據分布存儲模塊中的存儲節點進行映射；包括：確定每個地區、子地區對應的存儲節點，并記錄映射，以及，確定每個文具廠、文具收購站、線路對應的存儲節點，并記錄映射。

優選地，所述地區-＞子地區之間關聯關系，是指類似“省-市-縣”這樣的地區-＞子地區之間的包含關系。

優選地，所述廠站及線路，包括文具廠、文具收購站、線路；其中，所述文具廠、文具收購站通常統稱為廠站。

優選地，所述地區與廠站及線路間的關聯關系，是指地區與文具廠之間、地區與文具收購站之間以及地區與線路之間的包含關系。

優選地，所述按照地區-＞子地區-＞廠站或線路之間的包含關系，將文具數據網模型從網狀結構劃分樹狀結構層次，從而將文具數據中的文具數據按照關聯關系歸屬到相應的樹狀結構分支中，所述樹狀結構中地區為根節點，每個地區-＞子地區-＞廠站或線路構成一個具體的分支；這樣，其它文具數據就可以根據其與地區、廠站或線路及相互之間的關聯關系，被歸屬到相應的樹狀結構分支中。

優選地，所述文具數據存儲模塊，實現文具數據的新增和更新，所述新增和更新包括如下步驟：

當接到一個文具數據存儲請求時，文具數據分布管理模塊首先分析文具數據，確定其文具數據樹狀結構分支；

以文具數據所屬分支對應的地區或廠站線路信息為參數，查詢映射配置模塊，確定所對應的存儲節點；若發現數據無效，返回錯誤；

向查詢到的存儲節點發起文具數據存儲操作；

存儲節點接收到文具數據存儲請求后，根據文具數據是否存在，分別在存儲介質上執行數據更新或數據新建操作。

優選地，所述文具數據刪除模塊，實現文具數據的刪除，所述刪除包括如下步驟：

當接到一個文具數據刪除請求時，文具數據分布管理模塊首先分析文具數據，確定其文具數據樹狀結構分支；

以文具數據所屬分支對應的地區或廠站線路信息為參數，查詢映射配置模塊，確定所對應的存儲節點；若發現數據無效，返回錯誤；

存儲節點接收到文具數據刪除請求后，在存儲介質上執行數據刪除操作。

本發明實施例提供的文具大數據分布式存儲系統，通過利用文具數據與文具區域相關聯的分布式特性，在對大規模文具數據進行分布式存儲時，以之為依據，將所處理的文具數據合理的、均勻的分布到多個存儲節點上，并為后續的文具數據訪問提供易用、高效的基礎設施，實現了對文具大數據的分布式處理，且數據傳輸穩定。

附圖說明