[發明專利]一款Web端基于大數據技術的可視化數據處理方法

在審

• 申請號: 201910704850.2
• 申請日: 2019-08-01
• 公開（公告）號: CN110413681A
• 公開（公告）日: 2019-11-05
• 發明（設計）人: 張偉;劉宇;洪佳琪;段萌
• 申請（專利權）人: 上海勝泰信息技術有限公司
• 主分類號: G06F16/26
• 分類號: G06F16/26;G06F16/953;G06F16/2455
• 代理公司: 北京八月瓜知識產權代理有限公司 11543
• 代理人: 馬東瑞

1.一款Web端基于大數據技術的可視化數據處理方法，其特征在于，包括以下步驟：

S1：數據搜索：利用elasticsearch實現的基于lucene的分布式多用戶能力的全文搜索引擎；

S2：數據可視化，利用echarts實現的千萬級數據可視化渲染能力，支持常規的折線圖、柱狀圖、散點圖、餅圖、K線圖，并且支持圖與圖之間的混搭；jfreechart使用JAVA語言來實現可視化；

S3：數據挖掘及數據存儲：數據由第三方接口并發實時接入，利用關系型數據庫mysql來存儲數據，并利用分區，讀寫分離等技術對應大數據量處理需求；

S4：高并發處理及nosql數據庫：nosql數據庫redis，以內存存儲的數據結構服務器，來做關系數據庫的補充，高速緩存數據，為數據查詢統計并數據可視化提供性能保障；

S5：自動預警：通過詞庫中關鍵詞，及一系列規則匹配符合的新聞資訊，通過第三平臺提供短信預警，javamail實現郵件預警；

S6：Nginx及文件服務器為nginx高性能的HTTP和反向代理web服務器。

2.根據權利要求1的透明拉力膠的制備方法，其特征在于：在S1中，數據搜索可實現資訊數據的檢索，添加，更新和刪除，以及文本分析，標記和過濾，各類復雜的搜索查詢和聚類查詢分析功能。

3.根據權利要求1的透明拉力膠的制備方法，其特征在于：在S2中，數據可視化支持圖例、視覺映射、數據區域縮放、tooltip、數據刷選等交互式數據技術，可以自由選擇數據，挖掘數據，對多個圖表數據聯動查看，進行多維有效分析，可以在折線圖柱狀圖等上面直接交互點擊跳轉到對應數據列表或者跳轉另外的統計圖表。

4.根據權利要求1的透明拉力膠的制備方法，其特征在于：在S3中，通過圖表之間的關聯可實現數據篩選及數據清洗，并向搜索引擎中做數據索引。

5.根據權利要求1的透明拉力膠的制備方法，其特征在于：在S4中，高并發處理及nosql數據庫支持字符串、哈希表、列表、集合、有序集合，位圖，hyperloglogs等數據類型，內置復制、Lua腳本、LRU收回、事務以及不同級別磁盤持久化功能，同時通過Redis Sentinel提供高可用，通過Redis Cluster提供自動分區。

6.根據權利要求1的透明拉力膠的制備方法，其特征在于：在S5中，短信預警為封裝短信內容發送post請求，通過第三方短信通道，發送短信預警。

7.根據權利要求1的透明拉力膠的制備方法，其特征在于：在S5中，郵件預警為javamail java語言處理email的API。

8.根據權利要求1的透明拉力膠的制備方法，其特征在于：在S6中，Nginx及文件服務器將對應文件及圖片上傳至服務器，并可以通過http訪問及下載，并通過gzip壓縮圖片或者css。