[發明專利]一種基于校園大數據清洗的服務系統

在審

• 申請號: 201811266793.6
• 申請日: 2018-10-29
• 公開（公告）號: CN109359106A
• 公開（公告）日: 2019-02-19
• 發明（設計）人: 程東;何懷文;李瑞芳
• 申請（專利權）人: 電子科技大學中山學院
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/25
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明公開的一種基于校園大數據清洗的服務系統，包括校園管理服務器，數據收集系統、數據分類系統、數據清洗系統、數據分析系統；數據收集系統通過學生服務子系統、教學服務子系統和資源管理子系統收集數據；數據分類系統調取數據進行類別劃分，創建數據組織網；根據數據組織網中不同數據結構擴展結構信息表；數據清洗系統根據結構信息表從數據組織網中剔除冗余數據結構的數據；數據分析系統分析數據之間的關聯性，構建數據關系網，將具有相關性的數據重新組成事實表，存儲至校園管理服務器。本發明能夠針對不同數據流進行分類清洗處理，并進行關聯分析，發現數據內部的價值和規律，提高分析效率的同時，為學校的精細化管理和決策提供依據。

技術領域

本發明涉及數據分析技術領域，特別涉及一種基于校園大數據清洗的服務系統。

背景技術

隨著現代教育地不斷發展，老師、學生、管理者在教學、生活、管理過程中積累了海量數據，并且還在以更快地速度增長，例如在學生的成績、上網記錄和就餐消費等方面就產生了大量的數據，除此之外還有教學設備、教室信息和圖書等領域。數據已成為學校日益重要的無形資產。因此如何合理的利用這些數據進行教學的管理和決策成為學校快速發展有利的動力和基礎。

高校大數據的數據來源非常廣泛，既包括傳統的關系型數據庫，也包括XML等半結構化數據，以及以視頻、音頻、文本和其他形式存在的非結構化數據。因此，需要整合各種碎片化的數據，對數據進行清洗，保證數據質量。目前的數據清洗方法大多是針對某類特定應用域的數據清洗，在設計模式和使用方式等方面雖然能夠根據發現的錯誤模式，編制程序或借助于外部標準源文件、數據字典等手段，在一定程度上修正錯誤；但經常須編制復雜的程序或借助于人工干預完成，對于不同數據流的分類處理不具有通用性。

因此，如何提供一種數據分析效率高，能夠針對不同類型數據進行有效清洗的校園服務系統是本領域技術人員亟待解決的技術問題。

發明內容

有鑒于此，本發明的目的在于提供一種基于校園大數據清洗的服務系統，能夠針對不同數據流進行分類清洗處理，并進行關聯分析，發現數據內部的價值和規律，提高分析效率的同時，為學校的精細化管理和決策提供依據。為實現上述目的其具體方案如下：

本發明公開了一種基于校園大數據清洗的服務系統，

包括校園管理服務器，與所述校園管理服務器相連的數據收集系統、數據分類系統、數據清洗系統和數據分析系統；

其中，所述數據收集系統包括三個子系統，分別為學生服務子系統、教學服務子系統和資源管理子系統；三個所述子系統收集數據并存儲至校園管理服務器；

所述數據分類系統從所述校園管理服務器中調取數據，并將數據按照三個所述子系統進行類別劃分，創建數據組織網；并根據所述數據組織網中不同數據結構擴展結構信息表；

所述數據清洗系統根據所述結構信息表，從所述數據組織網中剔除冗余數據結構的數據，完成清洗；

所述數據分析系統對清洗后的各類數據進行分解，分析與梳理數據之間的關聯信息，構建圍繞學生、教學、資源為中心的數據關系網，將具有相關性的數據重新組成事實表，存儲至所述校園管理服務器。

本發明將采集的原始校園大數據根據不同服務子系統分類后進行清理處理，建立校園大數據平臺。清洗過程中融合數據結構信息，剔除大數據中不需要的結構數據，并建立數據關系網，實現了對校園大數據中各種信息的綜合分析挖掘，將學生學習、生活數據，教學相關數據，以及高校資源等數據進行有效連接與互通，實現以數據流為核心的數據鏈條，通過關聯分析，充分發揮數據的核心與重要價值。

優選的，三個所述子系統收集的數據包括：

學生服務子系統收集學生數據：學生基本信息、學生成績數據、無線網數據、消費數據；

教學服務子系統收集教學數據：教學設備信息、教室信息；