[發明專利]一種數據調度方法及系統

有效

• 申請號: 201510937896.0
• 申請日: 2015-12-15
• 公開（公告）號: CN106888237B
• 公開（公告）日: 2020-01-07
• 發明（設計）人: 張寶海;鮑媛媛
• 申請（專利權）人: 中國移動通信集團公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 11270 北京派特恩知識產權代理有限公司
• 代理人: 張穎玲;蔣雅潔

本發明公開了一種數據調度方法及系統，其中方法包括：基于至少一個服務器的歷史處理性能數據，確定所述歷史處理性能數據中包括的至少一種屬性，以及每一種屬性對應的至少一種類別；基于所述至少一個服務器的歷史處理性能數據，建立服務器測評模型；其中，所述服務器測評模型中包括：由至少一個屬性以及至少一個類別構成的至少一條分支路徑，以及由測評結果構成的每一條分支路徑的葉子節點；基于所述服務器測評模型，對所述服務器集群中的至少一個服務器進行測評得到針對所述至少一個服務器中的每一個服務器的測評結果；根據所述至少一個服務器中每一個服務器的測評結果進行數據調度。

技術領域

本發明涉及通信領域中的服務器集群管理技術，尤其涉及一種數據調度方法及系統。

背景技術

隨著進入大數據時代，大數據發展已經成為國家戰略，隨著硬件水平的不斷發展，數據中心的軟硬件設施性能在不斷的提升。其中網絡帶寬瓶頸不斷被突破，目前萬兆網絡已經成為數據中心的標準配置。服務器的存儲和計算能力也遵循摩爾定律不斷升級和優化。然而多數基于傳統數據分發調度策略已經不能滿足當前大數據環境下對于大數據量、實時性數據傳輸的要求。

這些調度策略在一定程度上解決了數據傳輸中的連接、調度問題，但是已經不適應現在的大數據環境下數據傳輸需求以及硬件配置的飛速發展。比如，以下幾種方式：輪循(Round Robin)，選擇這種方式就意味著能力比較弱的服務器也會在下一輪循環中接受輪循，即使這個服務器已經不能再處理當前這個請求了。這可能導致能力較弱的服務器超載。加權輪循(Weighted Round Robin)，管理員只是簡單的通過服務器的處理能力來定義各臺服務器的權重。最少連接數(Least Connection)，傳入的請求是根據每臺服務器當前所打開的連接數來分配的。即活躍連接數最少的服務器會自動接收下一個傳入的請求。但是，如果所有的服務器是相同的，那么基本上總是會優先選擇第一臺服務器。最少連接數慢啟動時間(Least Connection Slow Start Time)，基于管理人員配置的過渡時間進行處理。加權最少連接(Weighted Least Connection)，也是需要由管理員根據服務器情況定制的權重所決定的活躍連接數，來進行數據調度。固定權重(Fixed Weighted)，這種方式中每個真實服務器的權重需要基于服務器優先級來配置。加權響應(Weighted Response)，這種方式假定服務器心跳檢測是基于機器的快慢，但是這種假設也許不總是能夠成立。源IP哈希(Source IP Hash)，對于同一主機來說他對應的服務器總是相同，使用這種方式，可能導致服務器負載不平衡。

可以看出，上述現有技術中提供的多種調度方式，都無法保證根據服務器的屬性進行性能的分析進而進行調度，從而無法為數據調度的及時處理提供保證。

發明內容

有鑒于此，本發明的目的在于提供一種數據調度方法及系統，能至少解決現有技術中存在的上述問題。

為達到上述目的，本發明的技術方案是這樣實現的：

本發明實施例提供了一種數據調度方法，所述方法包括：

基于至少一個服務器的歷史處理性能數據，確定所述歷史處理性能數據中包括的至少一種屬性，以及每一種屬性對應的至少一種類別；

基于所述至少一個服務器的歷史處理性能數據，建立服務器測評模型；其中，所述服務器測評模型中包括：由至少一個屬性以及至少一個類別構成的至少一條分支路徑，以及由測評結果構成的每一條分支路徑的葉子節點；

基于所述服務器測評模型，對所述服務器集群中的至少一個服務器進行測評得到針對所述至少一個服務器中的每一個服務器的測評結果；

根據所述至少一個服務器中每一個服務器的測評結果進行數據調度。

本發明實施例提供了一種數據調度系統，包括：