[發(fā)明專利]時序指標數據動態(tài)提取方法、電子設備及存儲介質

在審

• 申請?zhí)枺?/td>: 202110866426.5
• 申請日: 2021-07-29
• 公開（公告）號: CN113568967A
• 公開（公告）日: 2021-10-29
• 發(fā)明（設計）人: 王利超;楊明;趙偉杰
• 申請（專利權）人: 掌閱科技股份有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/2455;G06F16/22
• 代理公司: 北京市浩天知識產權代理事務所(普通合伙) 11276
• 代理人: 趙婭

1.一種時序指標數據動態(tài)提取方法，包括：

讀取隊列中存儲的至少一條日志數據，其中，對所述至少一條日志數據預設埋點；

基于埋點確認是否接收到服務器動態(tài)下發(fā)的至少一條指標提取規(guī)則；

若是，根據所述至少一條指標提取規(guī)則，對所述至少一條日志數據進行轉換并提取得到時序指標數據。

2.根據權利要求1所述的方法，其中，所述至少一條指標提取規(guī)則由服務器下發(fā)存儲至指定數據庫中；

基于埋點確認是否接收到服務器動態(tài)下發(fā)的至少一條指標提取規(guī)則具體為：基于埋點確定所述指定數據庫是否接收到服務器動態(tài)下發(fā)的至少一條指標提取規(guī)則。

3.根據權利要求1所述的方法，其中，所述根據所述至少一條指標提取規(guī)則，對所述至少一條日志數據進行轉換并提取得到時序指標數據進一步包括：

對所述至少一條日志數據進行分析轉換，得到對應的時序數據；

解析所述至少一條指標提取規(guī)則，并在所述埋點中內置所述至少一條指標提取規(guī)則對應的時序數據模型；所述時序數據模型用于定義指定類型的時序指標；

根據所述時序數據模型，按照所述至少一條指標提取規(guī)則，對所述時序數據進行提取，得到時序指標數據；所述指標提取規(guī)則包含以下至少一個：指定待執(zhí)行的方法、指定方法的作用域、記錄方式、指定類型轉換、排序方式、收斂維度。

4.根據權利要求3所述的方法，其中，所述對所述至少一條日志數據進行分析轉換，得到對應的時序數據進一步包括：

根據日志數據的數據結構，創(chuàng)建定制化分析轉換規(guī)則；

根據所述定制化分析轉換規(guī)則，將所述日志數據轉換為指定格式的時序數據；其中，所述時序數據為結構化數據，以json格式表示。

5.根據權利要求3所述的方法，其中，所述方法還包括：

將轉換得到的所述時序數據存儲至列存儲數據庫；其中，時序數據的字段與所述列存儲數據庫的寬表一一對應。

6.根據權利要求5所述的方法，其中，所述將轉換得到的時序數據存儲至列存儲數據庫進一步包括：

基于bitmap模型，將轉換得到的時序數據進行壓縮；其中，所述bitmap模型以時間維度創(chuàng)建索引；

將壓縮后的時序數據存儲至列存儲數據庫。

7.根據權利要求3-6中任一項所述的方法，其中，所述根據所述至少一條指標提取規(guī)則，對所述至少一條日志數據進行轉換并提取得到時序指標數據進一步包括：

使用基數統計算法，對所述時序數據按照指定維度進行去重處理，以便根據去重后的時序數據提取得到時序指標數據。

8.根據權利要求1-7中任一項所述的方法，其中，在所述根據所述至少一條指標提取規(guī)則，對所述至少一條日志數據進行轉換并提取得到時序指標數據后，方法還包括：

周期性地將所述時序指標數據發(fā)送并存儲至時序數據庫，使得所述時序數據庫能夠被可視化引擎調用以顯示相應的可視化分析結果。

9.一種電子設備，包括：處理器、存儲器、通信接口和通信總線，所述處理器、所述存儲器和所述通信接口通過所述通信總線完成相互間的通信；

所述存儲器用于存放至少一可執(zhí)行指令，所述可執(zhí)行指令使所述處理器執(zhí)行以下操作：

讀取隊列中存儲的至少一條日志數據，其中，對所述至少一條日志數據預設埋點；

基于埋點確認是否接收到服務器動態(tài)下發(fā)的至少一條指標提取規(guī)則；

若是，根據所述至少一條指標提取規(guī)則，對所述至少一條日志數據進行轉換并提取得到時序指標數據。

10.一種計算機存儲介質，所述存儲介質中存儲有至少一可執(zhí)行指令，所述可執(zhí)行指令使處理器執(zhí)行如權利要求1-8中任一項所述的時序指標數據動態(tài)提取方法對應的操作。