[發明專利]一種基于多維分析的數據處理系統

有效

• 申請號: 202110322066.2
• 申請日: 2021-03-25
• 公開（公告）號: CN113111061B
• 公開（公告）日: 2022-09-13
• 發明（設計）人: 蔣一琛;許斌;姚笑秋;王紫露;王淑蕊;勾麗;周元;劉信;趙潔;方麗;王博穎;常春梅
• 申請（專利權）人: 浙江省科技信息研究院
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/26;G06F16/28;G06F16/23
• 代理公司: 杭州杭誠專利事務所有限公司 33109
• 代理人: 尉偉敏

1.一種基于多維分析的數據處理系統，其特征在于，包括：

數據采集模塊，包括定期采集模塊和分時處理模塊，所述定期采集模塊根據設置的周期T進行數據采集，所述分時處理模塊在周期T內對定期采集模塊采集的數據與原始數據庫中的數據進行對比，剔除相同的數據后將變化的數據傳遞給原始數據庫；

原始數據庫，用于存儲原始的統計數據以及數據采集模塊采集的變化數據，與數據展示模塊連接；

數據展示模塊，提取原始數據庫中的數據進行可視化界面制作并進行多維分析展示；

所述原始數據庫存儲原始的統計數據的方法為：將原始的統計數據進行分盤存儲，具體包括以下步驟：

S11：將存儲原始的統計數據的存儲盤分為主盤U_T和分盤U_{i，i∈[1,n],n≥2}；

S12：在主盤U_T和分盤U_{i，i∈[1,n],n≥2}之間建立通信環，將原始的統計數據形成一個數據包R；

S13：將數據包R拆分成K個數據包G_{j，j∈[1,k],k≤n}，將數據包G_{j，j∈[1,k],k≤n}隨機存入分盤U_{i，i∈[1,n],n≥2}內；

所述S13中將數據包G_{j，j∈[1,k],k≤n}隨機存入分盤U_{i，i∈[1,n],n≥2}內的具體方法為：主盤U_T將第一個數據包G₁經通信環傳遞給分盤U₁，若分盤U₁內沒有數據存儲，則分盤U₁以1/2的概率判斷是否接收數據包G₁，若分盤U₁已經存儲了數據或分盤U₁沒有接收數據包G₁，則產生加密報頭“0”，將加密報頭“0”和數據包G₁傳遞到分盤U₂，若分盤U₂沒有存儲數據且接收了數據包G₁，則產生加密報頭“1”，將分盤U₁的加密報頭和自身產生的加密報頭傳遞給下個分盤，后續的分盤進行加密報頭“0”的補充后傳遞給主盤U_T，主盤U_T在原本數據包G₁的位置記錄所有的加密報頭，將數據包G_{j，j∈[2,k],k≤n}以數據包G₁的方式存入分盤中；

所述數據展示模塊包括數據預處理模塊、可視化界面制作模塊和查詢模塊，所述數據預處理模塊建立基礎庫，所述可視化界面制作模塊用于制作可視化界面，所述查詢模塊用于查詢制作好的可視化界面，所述基礎庫的制作方法包括以下步驟：

S21：進入表單選取頁面進行表單選取；

S22：將選取的表單與原始數據庫進行數據關聯；

S23：將數據關聯后的表單進行存儲形成基礎庫；

所述可視化界面制作模塊包括目錄設置單元、搜索單元、工具欄單元、排序單元和維度轉換單元，所述目錄設置單元用于在UI界面設置目錄，所述搜索單元用于搜索基礎庫中的表單，所述工具欄單元用于制作UI界面模板，所述排序單元用于設置表單內的數據排序，所述維度轉換單元用于將表單內的指標數據轉換成多維度數據；

所述排序單元進行表單數據排序時包括以下步驟：

S31：獲取基礎庫中表單內的有效字段a1和空字段a2；

S32：獲取分時處理模塊中變化數據的有效字段A1；

S33：根據排序規則進行表單數據排序；

所述排序規則為：其中，ω為排序有效值，σ和均為加權系數，根據排序有效值ω從大到小進行排序。

2.根據權利要求1所述的一種基于多維分析的數據處理系統，其特征在于，

所述周期T的設置方法包括以下步驟：

S1：獲取數據采集的區域范圍θ；

S2：獲取數據采集的數據指標δ；

S3：獲取數據采集的目標種類μ；

S4：根據周期進行周期T的設置。

3.根據權利要求1所述的一種基于多維分析的數據處理系統，其特征在于，

若存在數據包G_x傳遞到分盤U_n均沒有被接收，則將數據包G_x在通信環內循環傳遞，直到數據包G_x被分盤接收。