[發明專利]一種公司形象提升系統的數據監測分析系統

有效

• 申請號: 201911183448.0
• 申請日: 2019-11-27
• 公開（公告）號: CN110889632B
• 公開（公告）日: 2023-10-13
• 發明（設計）人: 于灝;宋健;劉睿;鄭厚清;陳睿欣;謝清霞;潘泓廷;孫藝新;傅弘亞;賈德香;劉威;王玓;王智敏;劉素蔚;高洪達;陳光;柳占杰;李心達;王程;崔維平
• 申請（專利權）人: 國網能源研究院有限公司;國網北京市電力公司
• 主分類號: G06Q10/0639
• 分類號: G06Q10/0639;G06Q10/067;G06Q10/04
• 代理公司: 北京八月瓜知識產權代理有限公司 11543
• 代理人: 李斌

本發明公開了一種公司形象提升系統的數據監測分析系統，包括用戶數據服務與融合體系模塊、社交媒體傳播優化模塊、多源海量社交媒體數據實時采集模塊、異構社交媒體關鍵信息提取模塊與支撐海量社交媒體數據監測處理分析的流計算技術模塊，所述多源海量社交媒體數據實時采集模塊包括微服務全局分布式數據協調模塊、數據采集抓取服務模塊、數據采集處理服務模塊與數據持久化服務模塊，所述微服務全局分布式數據協調模塊。該公司形象提升系統的數據監測分析系統，能夠融合公司客戶服務數據和復雜社交網絡數據，構建數據融合體系架構，具有數據分析處理更加高效可靠、應用領域廣泛、實用價值較強、專家成本降低的優點。

技術領域

本發明涉及監測分析系統領域，具體為一種公司形象提升系統的數據監測分析系統。

背景技術

現存社交媒體大數據由多源、信息密度低的異構網頁文本為主體，在開展試點驗證過程中，既有實時計算處理需求，也有離線大規模分析需求；既有半結構化的網頁，也有非結構化的文檔，對于客戶潛在需求分析、情緒識別、社交媒體傳播監測分析等不同數據處理、分析任務對數據的更新周期、訪問時延、調用頻次等也存在很大的差異，傳統的規則抽取技術的召回率較低、健壯性不足，難以覆蓋全面的結構化字段和關鍵指標。

傳統的規則抽取技術的召回率較低、健壯性不足，難以覆蓋全面的結構化字段和關鍵指標，第一、社交媒體內容以網頁形式存在，包含大量需要進行分析、挖掘、計算的關鍵字段信息，例如微博的轉發數、評論和帳號信息，微信公眾號文章的閱讀數等。第二、不同社交媒體的網頁結構不同，指標也不盡相同，且經常處于變化中，僅僅利用規則抽取技術無法滿足社交媒體的更新和變化。第三、無論是自然語言處理，還是包裝器技術，往往針對一個特定的信息源、一個特定主題或者領域，每出現一個新的信息源就需要重新構造一套抽取程序，造成系統的可擴展性差。同時，目前各類規則抽取基于結構方式過于依賴網頁結構，基于內容方式需要復雜的語言知識和自然語言處理技術。

但是現有的數據監測分析系統在使用時存在一定的弊端，其難以融合公司客戶服務數據和復雜社交網絡數據，構建數據融合體系架構，其數據分析處理效率較低、實用價值不夠強、專家成本較高。

為此，提出一種公司形象提升系統的數據監測分析系統。

發明內容

(一)解決的技術問題

針對現有技術的不足，本發明提供了一種公司形象提升系統的數據監測分析系統，能夠融合公司客戶服務數據和復雜社交網絡數據，構建數據融合體系架構，具有數據分析處理更加高效可靠、應用領域廣泛、實用價值較強、專家成本降低的優點。

(二)技術方案

為實現以上目的，本發明通過以下技術方案予以實現：一種公司形象提升系統的數據監測分析系統，包括用戶數據服務與融合體系模塊、社交媒體傳播優化模塊、多源海量社交媒體數據實時采集模塊、異構社交媒體關鍵信息提取模塊與支撐海量社交媒體數據監測處理分析的流計算技術模塊；

所述多源海量社交媒體數據實時采集模塊包括微服務全局分布式數據協調模塊、數據采集抓取服務模塊、數據采集處理服務模塊與數據持久化服務模塊，所述微服務全局分布式數據協調模塊，是指服務之間的圖片共享通過FTP+Nginx靜態資源的方式進行訪問，文件共享通過nfs磁盤掛載的方式進行訪問，通過微服務、獨立化，對文件進行統一的管理和維護，進而實現對數據的協調式采集，搭建具備獨立規則、攜帶關鍵數據特征的數據庫，所述數據采集抓取服務模塊是指對數據進行抓取、轉換、加載，最終挖掘數據的潛在價值，并提供給用戶解決方案或者決策參考，所述數據采集處理服務模塊是指對數據進行分析和加工的技術過程，包括對各種原始數據的分析、整理、計算、編輯的加工和處理，所述數據持久化服務模塊是指通過處理采集器獲取的信息，清洗掉冗余數據和臟數據，統一存儲格式后將數據持久化存儲，其用于對采集處理完畢的數據進行分類存儲，使數據持久有效，或不對數據存儲內容進行任何格式處理，所有數據原封不動保存到文件中，或定義一套獨立的格式規范，后續便于將數據從文件中解析；