[實用新型]大數據庫一體機

有效

• 申請號: 201420318958.0
• 申請日: 2014-06-16
• 公開（公告）號: CN204102026U
• 公開（公告）日: 2015-01-14
• 發明（設計）人: 張真;王胤然;吳亞洲;譚崇剛;江健
• 申請（專利權）人: 南京云創存儲科技有限公司
• 主分類號: G06F1/16
• 分類號: G06F1/16;G06F17/30
• 代理公司: 江蘇圣典律師事務所 32237
• 代理人: 鄧麗

技術領域

本實用新型涉一種大數據庫一體機，具體講是一種處理速度快且性能穩定的大數據庫一體機，屬于數據處理技術領域。

背景技術

隨著計算機技術的飛速發展，各行各領域數據的呈幾何級快速增長。這些數據來自各方面，從搜集天氣情況的感測器、數碼圖片、在線的視頻資料，到網絡購物的交易記錄、手機的全球定位系統信號等應有盡有。伴隨數據規模的急劇膨脹，各行業累積的數據量越來越巨大，數據類型也越來越多、數據結構越來越復雜，已經超越了傳統數據管理系統、處理模式的能力范圍，傳統的串行數據庫系統已經難以適應這種飛速增長的應用需求，在生產實踐中表現出明顯的能力不足，無法滿足大數據時代的數據處理需求。

發明內容

本實用新型所要解決的技術問題在于克服現有技術缺陷，提供一種處理速度快、操作效率高能適應大數據處理的大數據庫一體機。

為了解決上述技術問題，本實用新型提供的大數據庫一體機，包括若干個數據庫處理單元、若干個SSD磁盤陣列、光纖交換機和SAN交換機；若干個SSD磁盤陣列均與SAN交換機連接，若干個數據庫處理單元均分別與SAN交換機和光纖交換機連接。

本實用新型的有益效果在于：本實用新型采用SSD磁盤陣列作為共享存儲設備提高讀寫速度，實現多節點負載均衡，通過并行數據庫技術提高響應時間，可按需擴展系統，保證系統性能的穩定；本實用新型可使EB級數據能夠秒級處理，極大極高了用戶執行查詢操作后的使用效率，其不僅在查詢和檢索數據時具有非常高的性能優勢，還可以支持數據倉庫存儲、數據深度挖掘和商業智能分析等。

為保障大數據庫一體機持續穩定運行，所述SAN交換機為兩臺，用于雙備份。

本大數據庫一體機采用JobKeeper分布式調度引擎，使達到大數據庫一體機負載均衡、集群性能更優。

附圖說明

圖1為本實用新型大數據庫一體機結構圖；

圖2為本實用新型大數據庫一體機內部連接示意圖；

圖3為JobKeeper分布式調度引擎系統架構圖。

具體實施方式

下面結合附圖對本實用新型作詳細說明。

如圖1所示，本實用新型大數據庫一體機包括由下而上依次安裝標準機架1內的SSD磁盤陣列1、SSD磁盤陣列2、SSD磁盤陣列3、SAN交換機1、SAN交換機2、數據庫處理單元1、數據庫處理單元2、數據庫處理單元3和光纖交換機，所有設備通過機架電源統一供電運行。

如圖2所示，SSD磁盤陣列1、SSD磁盤陣列2、SSD磁盤陣列3分別與SAN交換機1、SAN交換機2相互連接通信，SAN交換機1、SAN交換機2同時分別與數據庫處理單元1、數據庫處理單元2、數據庫處理單元3連接，實現SSD磁盤陣列1、SSD磁盤陣列2、SSD磁盤陣列3與數據庫處理單元1、數據庫處理單元2、數據庫處理單元3之間數據傳輸；數據庫處理單元1、數據庫處理單元2、數據庫處理單元3均連接光纖交換機，光纖交換機提供對外服務網絡接口，連接對外服務網絡，實現數據網絡間傳輸。

本實用新型中每個數據庫處理單元設置2塊HBA卡，用于連接SAN交換機，共享磁盤陣列。每個數據庫處理單元安裝統一關系型數據庫，上層應用為通用的數據庫平臺，系統根據負載情況自動切換訪問獨立節點的數據庫。SSD磁盤陣列采用閃存作為存儲介質，讀寫速度相對機械硬盤更快，功耗比傳統硬盤低，實現低能耗高效率的數據存儲。SAN交換機用于數據庫處理單元共享磁盤陣列，通過2臺SAN交換機實現備份，保證了大數據庫一體機的持續穩定運行。

本實例中大數據庫一體機采用3個SSD磁盤陣列和3個數據庫處理單元，在實際工作過程中，SSD磁盤陣列和數據庫處理單元的數量可根據需要進行增減，以實現不同級別的數據處理需求。

本實用新型中每個數據處理單元獨立裝載關系型數據庫系統，共用陣列存儲，形成組群模式。用戶向JobKeeper分布式調度引擎提交數據庫操作請求。JobKeeper分布式調度引擎根據各個數據處理單元的實際運行負載情況，將此操作請求下達到適合處理的數據處理單元之上，此處理單元獨立完成操作后反饋給用戶請求結果。以此模式達到利用SSD盤陣的高效IOPS和JobKeeper分布式調度引擎的負載均衡的優勢，使得數據庫操作的效率顯著提高。通過引入索引模塊、并行執行架構以及讀取本地磁盤的方式，使EB級數據能夠秒級處理。