[發明專利]日志處理方法、裝置及存儲介質、服務器在審
| 申請號: | 201810642922.0 | 申請日: | 2018-06-21 |
| 公開(公告)號: | CN109062774A | 公開(公告)日: | 2018-12-21 |
| 發明(設計)人: | 韓琪 | 申請(專利權)人: | 平安科技(深圳)有限公司 |
| 主分類號: | G06F11/34 | 分類號: | G06F11/34;G06F17/30;H04L12/24;H04L29/08 |
| 代理公司: | 深圳市立智方成知識產權代理事務所(普通合伙) 44468 | 代理人: | 王增鑫 |
| 地址: | 518000 廣東省深*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 日志 網絡存儲器 話務 服務器 分析 壓縮 網絡協議地址 日志處理 日志壓縮 存儲 占用 分布式分析 備份技術 備份日志 存儲介質 分析目標 日志備份 日志分析 數據分析 性能瓶頸 專有網絡 備份 歸檔 計算機網絡 檢索 復制 分配 保證 | ||
本發明涉及話務、計算機網絡計算、數據分析、檢索、存儲、備份技術領域,具體涉及本發明實施例提供的一種日志處理方法,包括:將目標話務日志備份到對應的網絡存儲器中,網絡存儲器被分配有網絡協議地址;將用于分析目標話務日志的服務器鏈接到網絡協議地址,以使得所述服務器對目標話務日志進行分析;將分析后的目標話務日志壓縮獲得壓縮日志,依據網絡存儲器指定的歸檔路徑將壓縮日志進行存儲。日志通過專有網絡復制出去再分析,保證了及時性也降低了日志分析過多的占用分析和壓縮都占用cpu等資源,通過將日志壓縮備份到網絡存儲器,且將分析日志的服務器掛備份日志的網絡存儲器的路徑,實現分布式分析及壓縮,解決了分析的性能瓶頸。
技術領域
本發明涉及話務、計算機網絡計算、數據分析、檢索、存儲、備份技術領域,具體涉及一種日志處理方法、裝置及計算機可讀存儲介質、服務器。
背景技術
隨著互聯網行業的迅猛發展,尤其是移動端應用的異軍突起,新一輪的數據爆炸時代的大門己經開啟,各類在線應用相互間的競爭口趨自熱化。其中,部分日志不僅能夠反應服務器的運行狀況,另一部分日志更是為業務提供了發展規劃的重要指標。特別地,在話務系統中,由于需要分析一下異常話路,或查詢用戶對于話務的查詢,只能通過tserver日志進行分析,由于日志結構和web的完全不一樣,并且有主備日志之分,并且主備都會輸出日志,需要區分主備,分析變得非常困難,另外又涉及跨平臺的話務轉接,造成話務分析變得困難,另外由于日志會被清理,程序本身沒有備份。另外在一個全平臺中產生的日志量非常大,單平臺的tserver日志每秒日志量在5M左右,分析和壓縮都占用cpu較高,單臺無法滿足,從而導致單平臺的tserver日志分析成為話務日志分析和定位的瓶頸。
發明內容
為克服以上技術問題,特別是單平臺的tserver日志分析成為話務日志分析和定位的瓶頸的問題,特提出以下技術方案:
本發明實施例提供的一種日志處理方法,包括:
將目標話務日志備份到對應的網絡存儲器中,所述網絡存儲器被分配有網絡協議地址;
將用于分析所述目標話務日志的服務器鏈接到所述網絡協議地址,以使得所述服務器對所述目標話務日志進行分析;
將分析后的目標話務日志壓縮獲得壓縮日志,依據所述網絡存儲器指定的歸檔路徑將所述壓縮日志進行存儲。
進一步地,在所述將用于分析所述目標話務日志的服務器鏈接到所述網絡協議地址,以使得所述服務器對所述目標話務日志進行分析之后,還包括:
提取分析后的所述目標話務日志中的關鍵字段,將所述關鍵字段存儲到數據庫中。
優選地,所述關鍵字段以索引方式存儲在數據庫中。
進一步地,在所述依據所述網絡存儲器指定的歸檔路徑將所述壓縮日志進行存儲之后,還包括:
刪除所述網絡存儲器內的分析后的所述目標話務日志。
進一步地,在所述依據所述網絡存儲器指定的歸檔路徑將所述壓縮日志進行存儲中之后,還包括:
構建與web查詢接口相對應且能從所述網絡存儲器中獲取到所述壓縮日志的日志查詢接口。
進一步地,在所述將目標話務日志備份到對應的網絡存儲器中之前,還包括:
依據預設關鍵信息和預設匹配規則確定當前日志是否為需要被備份的所述目標話務日志;
當確定所述當前日志為需要被備份的所述目標話務日志時,將備份所述目標話務日志的服務器切換為與所述目標話務日志相對應的服務器。
優選地,所述預設匹配規則為正則匹配規則。
進一步地,在所述將分析后的目標話務日志壓縮獲得壓縮日志之中,還包括:
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于平安科技(深圳)有限公司,未經平安科技(深圳)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810642922.0/2.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種信息處理方法及電子設備
- 下一篇:一種棧層優化判斷的方法、系統及設備





