[發明專利]一種基于大數據分析的政策信息服務系統及方法

在審

• 申請號: 202010152980.2
• 申請日: 2020-03-06
• 公開（公告）號: CN111400369A
• 公開（公告）日: 2020-07-10
• 發明（設計）人: 劉合安
• 申請（專利權）人: 湖南城市學院
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/28;G06F16/215;G06F16/245;G06Q50/26
• 代理公司: 長沙新裕知識產權代理有限公司 43210
• 代理人: 劉熙

本發明屬于管理技術領域，公開了一種基于大數據分析的政策信息服務系統及方法，數據挖掘模塊用于獲取最新政策文件以及相關信息；數據處理模塊用于進行數據預處理；數據提取模塊用于對數據進行多維度分析；數據分類模塊用于進行政策的分類匯總；存儲模塊用于存儲獲取到的相關政策文件；數據更新模塊用于進行政策信息的實時更新；查詢模塊用于進行相關政策的查詢；反饋模塊進行政策反饋；統計模塊用于生成統計報表；定制提醒模塊用于進行相關政策的定制提醒。本發明通過對獲取到的原數據進行預處理分析，提高了數據的準確度以及可靠度，實現了政策的精準分析，提高了政策信息的價值利用率。

技術領域

本發明屬于管理技術領域，尤其涉及一種基于大數據分析的政策信息服務系統及方法。

背景技術

目前，政策宣講是政策落地實施的重要前提，也是推進社會發展的重要手段之一。近年來，中小企業對政策信息及相關咨詢服務的需求越來越迫切，全面快捷地獲取政策類資訊信息，為企業發展提供決策依據。然而政策在貫徹宣傳過程中存在層級過多、渠道單一、缺乏反饋等問題，從而導致科技政策實施過程中出現理解不全、執行偏差等情況。

通過上述分析，現有技術存在的問題及缺陷為：現有政策宣傳以及公開主要通過政務網實現，層級過多，渠道單一且并無反饋渠道。

發明內容

針對現有技術存在的問題，本發明提供了一種基于大數據分析的政策信息服務系統及方法。

本發明是這樣實現的，一種基于大數據分析的政策信息服務方法，包括：

步驟一，利用大數據挖掘技術從各個政務公開網站獲取最新政策文件以及相關信息；利用大數據分析處理技術對獲取到的各個政策文件、相關信息進行預處理并獲取從各個政務公開網站獲取最新政策文件以及相關數據信息；

步驟二，對獲取到的相關文件、數據信息進行數據來源驗證，驗證通過則轉向步驟三，驗證未通過則刪除相關數據；

步驟三，對驗證來源通過的數據進行去重、過濾、歸一化處理；首先由數據處理模塊計算需要存儲文件的文件特征和每個數據塊的指紋，然后將文件特征指紋與每個數據塊指紋發送給主節點單元；所述數據指紋是通過哈希函數生成的散列值，能唯一標識生成該數據指紋的數據塊，具有全局唯一性；

步驟四，由主節點單元根據該文件特征指紋去主索引中檢索；所述的主索引為key-value鍵值對的數據結構，key為文檔特征指紋，代表某一類文件，value為該指向類文件的相似性集合的指針，指向某一特定文件的相似性集合，即指向從索引；

步驟五，如果未檢索到與該文件特征指紋相同的記錄，則表明該文件為一新文件；若檢索到已存在與該文件特征指紋相同的記錄，則表明存在同類型的文件數據存在，則將此文件進行刪除；

步驟六，基于步驟三至步驟五提取到的文件標簽以及自定義分類屬性進行政策的分類匯總；基于大數據分析技術對預處理后的政策文件以及相關信息內容進行多維度分析；

步驟七，利用數據庫存儲獲取到的相關政策文件，并建立政策文件關鍵詞和政策文檔之間的索引映射關系表；進行政策信息的實時更新；所述建立政策文件關鍵詞和政策文檔之間的索引映射關系表包括：獲取各個政策文件以及相關數據信息的標簽；基于大數據分析技術計算各個政策文件以及相關數據信息中某個標簽出現的次數，將標簽出現次數與文檔編號建立索引關系；

基于建立的索引關系通過行列運算計算相對于標簽的文檔相關性排序；基于建立的索引關系按照相關性排序結果構建索引映射關系表；

步驟八，通過自定義查詢條件或輸入查詢關鍵詞查詢相關政策文件，并輸出查詢報表；針對查詢過或正在查詢的政策文件提供數據反饋通道，收集針對查看的政策的相關意見或建議信息，并進行信息反饋。

進一步，所述步驟三中的哈希函數采用的為SHA-1算法。