[發明專利]用于IT運維平臺的高效采集系統

無效

• 申請號: 201210305274.2
• 申請日: 2012-08-25
• 公開（公告）號: CN103634132A
• 公開（公告）日: 2014-03-12
• 發明（設計）人: 不公告發明人
• 申請（專利權）人: 成都勤智數碼科技股份有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術領域

本發明涉及IT運維領域，尤其涉及一種用于IT運維系統的高效采集子系統。

背景技術

在IT運維領域，IT運維系統為保障整個系統的正常運行，需要實時了解系統中各個設備的運行情況，由此產生了大量的設備運行情況采集任務，運行數據采集的及時有效對于IT運維系統的準確運作至關重要，在現有技術中，采集功能模塊直接嵌入在IT運維系統中，且采集方法簡陋、直白，缺乏對采集任務本身的分析，采用簡單隊列方式排次處理，不僅會導致重要采集任務的延遲，而且無法對采集任務進行處理操作，尤其當采集任務超負荷的時候，不能靈活的調度任務隊列，致使運維系統失效；缺乏獨立的任務調度機制設計，不僅調度水平低下，而且調度機制的修改困難；同時，由于沒有對采集系統采用模塊化設計，導致系統擴容和升級困難。

發明內容

本發明的目的在于提供了一種用于IT運維平臺的高效采集系統，將采集任務從運維平臺中剝離出來，設計獨立的采集系統，以便于引入對采集任務本身的評級、分析步驟，從而可以對任務進行分類、評級、排序，并引入基于任務分析進行專門的調度作業，從而提高了采集工作的靈活性和智能化，不僅提高了采集效率，而且提高了采集任務的質量和對運維目標的適應性，還將任務調度與作業活動從任務隊列和評級活動中分離開來，提高了采集系統容量配置的靈活性。

本發明的目的通過如下方案實現，用于IT運維平臺的高效采集系統，包含有數據采集設備，其特征在于，該系統還包含有采集任務隊列、優先級運算器、任務調度器、備用調度器、未調度任務緩存，數據采集設備包含有采集機、備用采集機，優先級運算器、任務調度器、備用調度器、未調度任務緩存與采集任務隊列連接，采集機與任務調度器連接，備用采集機與備用調度器連接，任務調度器、未調度任務緩存與備用調度器連接。

采集任務隊列：負責接受并存儲提交的采集任務，并且可將這些采集任務按照一定的規則分配到各個子隊列中，等待任務調度器或者備用調度器的調度。采集任務隊列為一系列子隊列集合，每個子隊列都有自己的優先級，通過這些隊列緩存提交的采集任務。

優先級運算器：當外部提交的采集任務提交到采集隊列中時，采集隊列會通知優先級運算器，優先級運算器屆時會根據預設的優先級運算規則，以及以及當前采集任務隊列中未調度任務的狀態、采集任務的屬性、指標，如：采集任務提交時間、預計完成時間、已等待時間等，動態計算每個任務的調度優先級，并且能夠更新隊列中各個任務的優先級、將其移動到采集隊列的相應位置。

任務調度器：當采集隊列中的任務不為空的時候，也可以是采集隊列通知任務調度器，詢問是否有空閑的采集機資源，任務調度器通過其管理的采集機上報的采集狀態，判斷是否有可用的采集機資源，如果有，任務調度器從采集隊列中優先級最高的位置獲取一個采集任務，并且將這個采集任務分配給空閑中得采集機，還具有從采集隊列中獲取采集任務的能力，任務調度器具有根據任務隊列中各個任務的優先級，獲取相應的任務，并將它們根據各個采集機的狀態均衡的分發給各個采集機，并且具備記錄其所管理的采集機的狀態信息，在采集機處于飽和狀態的時候通知備用調度器進行調度的能力。

備用調度器：當采集隊列中的采集任務不為空，任務調度器所管理的采集機處于滿負荷調度狀態時，任務調度器通知備用調度器，備用調度器則啟動，檢查采集隊列中是否具有已到達最遲采集時間的采集任務，這樣可進一步提高緊急任務處理的及時性，如果具有這樣的采集任務，備用調度器從采集隊列中獲取所有的這樣的采集任務，并且將這些任務分配給備用采集機，如果獲取的采集任務不能分配完畢，則將未分配的任務放入到未調度任務緩存中。

采集機和備用采集機：當收到任務調度器、備用調度器分配的采集任務后，會根據任務的采集流程，采集信息，并且在采集任務結束后，向任務調度器或者備用調度器上報自身的狀態。

未調度任務緩存：根據預設的規則、策略的需要，未調度任務緩存中的任務可以重新放入到采集隊列中，或者重新由備用采集機選擇，并且將其分配給備用采集機，或者直接丟棄。

更進一步的，所述采集任務隊列通過采集任務隊列服務器實現、優先級運算器通過優先級運算服務器實現、任務調度器通過任務調度服務器實現、備用調度器通過備用調度服務器實現、未調度任務緩存安排在備用調度服務器上，優先級運算服務器、任務調度服務器、備用調度服務器與采集任務隊列服務器連接，采集機與任務調度服務器連接，備用采集機與備用調度服務器連接，任務調度服務器還與備用調度服務器連接。