[發明專利]一種分析網站故障的方法、裝置、存儲介質及計算機設備

有效

• 申請號: 201910110615.2
• 申請日: 2019-02-12
• 公開（公告）號: CN111555895B
• 公開（公告）日: 2023-02-21
• 發明（設計）人: 陳哲;叢磊
• 申請（專利權）人: 北京數安鑫云信息技術有限公司
• 主分類號: H04L41/0631
• 分類號: H04L41/0631
• 代理公司: 北京名華博信知識產權代理有限公司 11453
• 代理人: 白瑩;苗源

本發明公開了一種分析網站故障的方法、裝置、存儲介質及計算機設備。所公開的方法包括：采用至少一種第一統計方法，針對日志數據中的數值字段和/或非數值字段進行第一次數值統計，獲取第一數值統計序列；采用至少四種不同的第二統計方法，分別針對第一數值統計序列進行第二次數值統計，獲取第二數值統計序列；剔除針對每一個第一數值統計序列的、第二數值統計序列中的、統計誤差超過預定誤差的第二數值統計序列，得到用于分析網站故障的、針對每一個第一數值統計序列的第三數值統計序列；基于針對至少一個第一數值統計序列的第三數值統計序列的統計結果的投票結果，確定可能導致網站故障的異常及異常時刻。所公開的方案能夠自動監控網站異常。

技術領域

本發明涉及計算機技術和網絡技術領域，尤其涉及一種分析網站故障的方法、裝置、存儲介質及計算機設備。

背景技術

網站的系統日志是用于分析、定位、解決網站故障的重要數據。現有技術在對網站故障進行處理時，通常都是通過運維工程師人工查看系統日志來分析、定位、解決故障的。因此，現有技術方案具有以下缺點：

1、需要大量人工成本來篩查海量日志，故障的分析和處理完全依賴運維工程師的個人經驗和對整個系統架構的了解。

2、對于相同的故障也需要進行大量的重復勞動。

3、問題的人工排查、修復時間長，增加了網站服務故障的持續時間和成本。

因此，需要提出能夠自動分析網站故障的技術方案。

發明內容

根據本發明的分析網站故障的方法，包括：

采用至少一種第一統計方法，針對日志數據中的數值字段和/或非數值字段進行第一次數值統計，獲取第一數值統計序列；

采用至少四種不同的第二統計方法，分別針對第一數值統計序列進行第二次數值統計，獲取第二數值統計序列；

剔除針對每一個第一數值統計序列的、第二數值統計序列中的、統計誤差超過預定誤差的第二數值統計序列，得到用于分析網站故障的、針對每一個第一數值統計序列的第三數值統計序列；

基于針對至少一個第一數值統計序列的第三數值統計序列的統計結果的投票結果，確定可能導致網站故障的異常及異常時刻。

根據本發明的分析網站故障的方法，還包括：

采用至少一種第三統計方法，針對各個第一數值統計序列進行第三次數值統計，得到第四數值統計序列；

采用至少一種第四統計方法，針對指定時間段內的異常時刻序列進行第四次數值統計，得到第五數值統計序列；

將第五數值統計序列的統計結果進行排序，將排序結果靠前的異常及異常時刻關聯到指定時間段內的自定義事件，

其中，自定義事件包括下列中的至少一種：第一數值統計序列、第二數值統計序列的變化率、比率、上限、下限分別大于預定變化率閾值、比率閾值、上限閾值、下限閾值的事件，指定時間段是包含自定義事件的指定時間段。

根據本發明的分析網站故障的方法，還包括：

將同時包含異常及與該異常關聯的自定義事件的情況確定為網站故障。

根據本發明的分析網站故障的方法，其第一統計方法包括：信息熵、單位時間內累加和平均數值、相鄰數值的差值，其第二統計方法包括：指數平滑、多層感知、線性回歸、分位數、標準差，其第三統計方法包括：正比、反比、關聯度，其第四統計方法包括：絕對值正比、變化率正比、數據來源關聯度反比、時間差反比，其日志數據包括：非安全產品日志數據和安全產品日志數據。

根據本發明的分析網站故障的裝置，包括：