[發明專利]一種數據的歸集方法及設備

在審

• 申請號: 202111093375.3
• 申請日: 2021-09-17
• 公開（公告）號: CN114817237A
• 公開（公告）日: 2022-07-29
• 發明（設計）人: 高坤祥;馬偉
• 申請（專利權）人: 安徽中科新辰技術有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/2453;G06F16/27;G06Q50/26
• 代理公司: 合肥金律專利代理事務所(普通合伙) 34184
• 代理人: 段曉微

本申請公開了一種數據的歸集方法及設備，用以解決現有的數據歸集方法效率低的技術問題。方法包括：獲取數據中的各維度，預先構建的維度數據表；從維度中選取查詢維度，并根據查詢維度構建查詢方案表；根據查詢方案表中的若干查詢維度，從由信息構成的數據源表中，分別獲取相應查詢維度對應的數據，并將數據存至中間表中；對中間表中的數據進行處理，將處理結果同步至與查詢方案表對應的歸集表中。本申請通過上述方法能夠針對不同的數據分析場景，靈活配置多種查詢維度，并據此進行數據的查詢及分析，有效提高了歸集查詢效率。

技術領域

本申請涉及數據處理技術領域，尤其涉及一種數據的歸集方法及設備。

背景技術

數據現實應用中，常常需要對數據進行特征要素提取后，對特征要素進行人工串并查找線索，并提供線索的時間軸展示、列表展示、圖譜展示和地圖展示信息。因此，如果想要查詢不同維度的數據，就需要通過開發出相應維度的查詢功能，同時，系統數據庫中通常都會存儲著大量的數據，如果直接根據現有的數據進行數據的查詢和處理，處理速度較慢，效率低下。

發明內容

本申請實施例提供了一種數據的歸集方法及設備，用以解決現有的數據歸集方法在通過不同維度去查詢數據時效率低的技術問題。

一方面，本申請實施例提供了一種數據的歸集方法，包括：獲取數據中的各維度，預先構建的維度數據表；從維度中選取查詢維度，并根據查詢維度構建查詢方案表；根據查詢方案表中的若干查詢維度，從由信息構成的數據源表中，分別獲取相應查詢維度對應的數據，并將數據存至中間表中；對中間表中的數據進行處理，將處理結果同步至與查詢方案表對應的歸集表中。

在本申請的一種實現方式中，獲取數據中的各維度，預先構建的維度數據表，具體包括：確定各維度對應的數據源表和數據源表中的對應字段，構建維度數據表。

在本申請的一種實現方式中，從維度中選取查詢維度之前，方法還包括：確定指定的查詢類別；根據查詢類別，確定待配置的查詢方案表所屬的類別，以便確定待配置的查詢方案表對應的數據處理方式；其中，類別包括亂點和數據。

在本申請的一種實現方式中，從維度中選取查詢維度，并根據查詢維度構建查詢方案表，具體包括：從維度中選取查詢維度；根據查詢維度，確定對應的展示格式；根據查詢維度和展示格式，構建查詢方案表。

在本申請的一種實現方式中，將處理結果同步至與查詢方案表對應的歸集表中之前，方法還包括：針對各查詢維度，分別構建對應的擴展字段；根據默認字段和擴展字段，構建歸集表。

在本申請的一種實現方式中，確定待配置的查詢方案表所屬的類別，以便確定待配置的查詢方案表對應的數據處理方式，具體包括：根據待配置的查詢方案表所屬的類別，確定待配置的查詢方案表對應的數據處理方式；在類別為數據的情況下，將中間表中的數據同步至歸集表中；在類別為亂點的情況下，根據查詢維度，對中間表中的數據進行地圖聚合，并將聚合結果同步至歸集表中。

在本申請的一種實現方式中，根據查詢方案表中的若干查詢維度，從由信息構成的數據源表中，分別獲取相應查詢維度對應的數據，具體包括：確定構成數據源表的若干信息；針對若干信息，根據查詢方案表中的若干查詢維度，從該信息中，分別獲取相應查詢維度對應的數據，并將數據存至中間表中。

在本申請的一種實現方式中，確定待配置的查詢方案表對應的數據處理方式之后，方法還包括：根據待配置的查詢方案表，確定歸集表中的數據是否顯示，及中間表中的數據是否需要匯總；在中間表中的數據需要匯總的情況下，對相同維度下的中間表中的數據進行匯總。

在本申請的一種實現方式中，方法還包括：當查詢維度更改時，根據更改后的查詢維度重新構建對應的查詢方案表。

另一方面，本申請實施例還提供了一種數據的歸集設備，設備包括：處理器；及存儲器，其上存儲有可執行代碼，當可執行代碼被執行時，使得處理器執行如上述的一種數據的歸集方法。