[發明專利]一種分析數據的方法、裝置、設備及存儲介質

有效

• 申請號: 201810113658.1
• 申請日: 2018-02-05
• 公開（公告）號: CN108319704B
• 公開（公告）日: 2020-11-06
• 發明（設計）人: 鹿凌華;田亞;廖家緒;王能
• 申請（專利權）人: 北京中關村科金技術有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 羅滿

1.一種分析數據的方法，其特征在于，包括：

獲取實時數據并確定所述實時數據的數據類型；其中，所述數據類型包括無實例變量的無狀態數據和有實例變量的有狀態數據；

若所述實時數據為所述無狀態數據，則將所述無狀態數據的維度數據進行排列組合后按照預先設置的計算邏輯進行計算，得到預計算結果表；

若所述實時數據為所述有狀態數據，則按照預先設置的存儲規則存儲所述有狀態數據以獲得維度結構表；

在獲取操作指令時，按照所述操作指令并利用所述預計算結果表和/或所述維度結構表的內容進行計算；

其中，所述操作指令具體為標準SQL，對應的，所述按照所述操作指令并利用所述預計算結果表和/或所述維度結構表的內容進行計算具體為：

通過Calcite SQL執行引擎將所述標準SQL解析為Java執行程序；

利用所述Java執行程序調用hbase查詢接口，以便利用所述hbase查詢接口訪問所述預計算結果表和/或所述維度結構表；

按照所述操作指令的要求對訪問的內容進行計算。

2.根據權利要求1所述的方法，其特征在于，所述獲取實時數據并確定所述實時數據的數據類型具體包括：

利用流計算引擎獲取所述實時數據；

將所述實時數據按照預設的規則進行分流處理得到多個處理線程；

設置各所述處理線程分別進入所述確定所述實時數據的數據類型的步驟。

3.根據權利要求1所述的方法，其特征在于，所述按照預先設置的存儲規則存儲所述有狀態數據以獲得維度結構表具體包括：

根據預先設置的數據結構要求將所述有狀態數據的維度數據進行拆分或合并；

將拆分或合并后的所述有狀態數據的維度數據存儲于所述數據結構要求對應的表格中以得到所述維度結構表。

4.根據權利要求1所述的方法，其特征在于，所述計算邏輯具體包括sum、count和average。

5.一種分析數據的裝置，其特征在于，包括：

獲取模塊，用于獲取實時數據并確定所述實時數據的數據類型；其中，所述數據類型包括無實例變量的無狀態數據和有實例變量的有狀態數據；

第一處理模塊，用于若所述實時數據為所述無狀態數據，則將所述無狀態數據的維度數據進行排列組合后按照預先設置的計算邏輯進行計算，得到預計算結果表；

第二處理模塊，用于若所述實時數據為所述有狀態數據，則按照預先設置的存儲規則存儲所述有狀態數據以獲得維度結構表；

計算模塊，用于在獲取操作指令時，按照所述操作指令并利用所述預計算結果表和/或所述維度結構表的內容進行計算；

其中，所述操作指令具體為標準SQL，對應的，所述計算模塊具體用于：

通過Calcite SQL執行引擎將所述標準SQL解析為Java執行程序；

利用所述Java執行程序調用hbase查詢接口，以便利用所述hbase查詢接口訪問所述預計算結果表和/或所述維度結構表；

按照所述操作指令的要求對訪問的內容進行計算。

6.一種分析數據的設備，其特征在于，包括：

存儲器，用于存儲計算機程序；

處理器，用于執行所述計算機程序時實現如權利要求1至4任一項所述的分析數據的方法的步驟。

7.一種計算機可讀存儲介質，其特征在于，所述計算機可讀存儲介質上存儲有計算機程序，所述計算機程序被處理器執行時實現如權利要求1至4任一項所述的分析數據的方法的步驟。