[發明專利]一種數據處理方法和裝置

在審

• 申請號: 202010923286.6
• 申請日: 2020-09-04
• 公開（公告）號: CN113760634A
• 公開（公告）日: 2021-12-07
• 發明（設計）人: 汪軍勝;蒙明明;廖文華;陳銘發;黃小芳
• 申請（專利權）人: 北京沃東天駿信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 郝紅玉;馮培培

本發明公開了一種數據處理方法和裝置，涉及計算機技術領域。該方法的一具體實施方式包括：獲取待處理的數據，確定與所述數據所處維度對應的故障分析策略；基于所述故障分析策略分析所述數據是否異常，若異常，則診斷所述數據的故障類型；通過與所述故障類型對應的預案策略處理所述數據。該實施方式采用自動化為主、人工為輔的策略，基于數據處理中心和決策分析中心，收集最小粒度的數據，在發現異常數據時及時處理，以將故障消滅在萌芽階段，達到自動發現、甄別和處理的目的。

技術領域

本發明涉及計算機技術領域，尤其涉及一種數據處理方法和裝置。

背景技術

企業中通常設置一些部門，用以管理特定信息的存儲和查詢工作。特殊定位決定了其所使用的系統必須具備最高等級的可用性、穩定性以及最及時的問題處理響應能力。目前處理方案如下：

1)接入監控系統監控特定指標，當達到配置閾值時報警。工作人員收到報警信息并處理，譬如下線微服務、分組切換、系統機器摘量(將機器進行冷備處理，不再接收外部新請求)等。

2)接入日志上報收集系統：工作人員定期查看日志信息，梳理篩選日志中包含的異常信息，分析問題并處理。

3)使用pcms.xx.com、ducc.xx.com等配置中心，對相應配置進行開關、預案、分組切換操作。

在實現本發明的過程中，發明人發現現有技術至少存在如下問題：

1)監控系統、配置中心只能通過PC平臺操作，若系統發生異常報警，而身邊無電腦可登錄處理，意味著存在較長的空窗期放任異常存在，對超0級系統而言是不可接受的；

2)報警的處理、異常日志的檢索、緊急預案的執行都依賴人工處理，易存在遺漏、操作失誤等隱患，且隨著企業內部門數量的增加，單靠人工完成上述操作已成為不可能；

3)現有方式只有故障暴露出來后(如設備故障、機房故障)，才會通過監控中心、日志采集查詢系統等平臺查詢故障原因，屬于事后修復和彌補，具有一定延遲性。

發明內容

有鑒于此，本發明實施例提供一種數據處理方法和裝置，至少能夠解決現有技術中過于依賴人為操作和PC平臺，帶來的系統穩定性和可用性不高的問題。

為實現上述目的，根據本發明實施例的一個方面，提供了一種數據處理方法，包括：

獲取待處理的數據，確定與所述數據所處維度對應的故障分析策略；其中，維度為數據存儲的最小粒度；

基于所述故障分析策略分析所述數據是否異常，若異常，則診斷所述數據的故障類型；

通過與所述故障類型對應的預案策略處理所述數據。

可選的，所述基于所述故障分析策略分析所述數據是否異常，包括：

獲取所述故障分析策略中的第一故障閾值，判斷所述數據中的數值是否超出所述第一故障閾值，若超出，則確定所述數據異常；

若未超出，則獲取存儲于所述數據中的設備標識，確定與所述設備標識對應的設備以及所述設備所處機房，進而確定所述機房所處平臺下的其他機房以及位于其他機房下的其他設備；

確定所述其他設備下與所述維度對應的第一數據，計算所述數據與所述第一數據的差值，若所述差值與所述第一數據的比值均超出第二故障閾值，則確定所述數據異常。

可選的，所述診斷所述數據的故障類型，包括：在通過所述第一故障閾值診斷到所述數據異常時，診斷所述故障類型為設備故障；

所述通過與所述故障類型對應的預案策略處理所述數據，包括：

通過所述設備的設備號調用微服務實例接口，以判斷所述設備是否屬于微服務類型；