[發明專利]用于數據交互的異常信息監控方法及裝置

有效

• 申請號: 201710750693.X
• 申請日: 2017-08-28
• 公開（公告）號: CN107506451B
• 公開（公告）日: 2020-11-03
• 發明（設計）人: 楊旺明;劉清華;王坤;李娟
• 申請（專利權）人: 泰康保險集團股份有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21;G06F16/25;G06F16/28
• 代理公司: 隆天知識產權代理有限公司 72003
• 代理人: 李昕巍;章侃銥

1.一種用于數據交互的異常信息監控方法，其特征在于，包括：

將源數據庫數據導入至目標數據庫中，生成數據流傳輸日志文件；

讀取異常信息規則庫并調用文本處理器，所述異常信息規則庫相對于所述文本處理器是獨立的部分，能夠直接在所述異常信息規則庫中配置新的規則或者刪除/修改已有的規則；

通過所述文本處理器根據所述異常信息規則庫中配置的規則，利用腳本語言的正則表達式和Shell文件處理功能，通過Linux系統定時命令，解析所述數據流傳輸日志文件，捕獲異常信息，所述異常信息規則庫中配置的規則包括所述源數據庫數據導入至所述目標數據庫時產生的異常信息和/或所述目標數據庫的性能指標。

2.根據權利要求1所述的用于數據交互的異常信息監控方法，其特征在于，所述源數據庫和所述目標數據庫是不同類型的關系型數據庫，所述數據是結構化數據。

3.根據權利要求1所述的用于數據交互的異常信息監控方法，其特征在于，所述異常信息規則庫中配置的規則包括第一類型規則，其中通過所述文本處理器根據所述異常信息規則庫中配置的規則解析所述數據流傳輸日志文件，捕獲異常信息包括：

執行完導入數據命令后，所述文本處理器實時掃描所述數據流傳輸日志文件，獲取文件生成時間；

當所述文件生成時間晚于定時任務執行時間時，觸發所述文本處理器進行所述數據流傳輸日志文件的解析；

所述文本處理器根據所述異常信息規則庫中配置的所述第一類型規則進行所述數據流傳輸日志文件的全文搜索；

當所述數據流傳輸日志文件中存在所述第一類型規則中的字段時，抓取所述數據流傳輸日志文件所述字段后的信息，捕獲所述異常信息。

4.根據權利要求1所述的用于數據交互的異常信息監控方法，其特征在于，所述異常信息規則庫中配置的規則包括第二類型規則，其中通過所述文本處理器根據所述異常信息規則庫中配置的規則解析所述數據流傳輸日志文件，捕獲異常信息包括：

執行完導入數據命令后，所述文本處理器實時掃描所述數據流傳輸日志文件，獲取文件生成時間；

當所述文件生成時間晚于定時任務執行時間時，觸發所述文本處理器進行所述數據流傳輸日志文件的解析；

所述文本處理器根據所述異常信息規則庫中配置的所述第二類型規則進行所述數據流傳輸日志文件的搜索；

當所述數據流傳輸日志文件中存在所述第二類型規則中的字段時，終止當前搜索，調用第二類型規則處理包進行處理，捕獲所述異常信息。

5.根據權利要求1所述的用于數據交互的異常信息監控方法，其特征在于，所述異常信息包括異常數據及其相應的數據流傳輸日志文件，所述方法還包括：

當捕獲到所述異常信息時，將所述異常數據及其相應的數據流傳輸日志文件進行存儲；

對所述異常數據及其相應的數據流傳輸日志文件進行分析處理，生成異常信息報告并調用即時通訊接口進行推送。

6.根據權利要求1所述的用于數據交互的異常信息監控方法，其特征在于，所述方法還包括：

將所述源數據庫和所述目標數據庫間的數據交互量、數據導入導出耗費時間、異常信息中的一種或者多種作為數據庫交互壓力指標。

7.一種用于數據交互的異常信息監控裝置，其特征在于，包括：

日志文件生成模塊，用于將源數據庫數據導入至目標數據庫中，生成數據流傳輸日志文件；

讀取調用模塊，用于讀取異常信息規則庫并調用文本處理器，所述異常信息規則庫相對于所述文本處理器是獨立的部分，能夠直接在所述異常信息規則庫中配置新的規則或者刪除/修改已有的規則；

異常信息捕獲模塊，用于通過所述文本處理器根據所述異常信息規則庫中配置的規則，利用腳本語言的正則表達式和Shell文件處理功能，通過Linux系統定時命令，解析所述數據流傳輸日志文件，捕獲異常信息，所述異常信息規則庫中配置的規則包括所述源數據庫數據導入至所述目標數據庫時產生的異常信息和/或所述目標數據庫的性能指標。