[發明專利]一種搜索引擎 SEO 網站數據的優化抓取方法及系統

在審

• 申請號: 201510106543.6
• 申請日: 2015-03-11
• 公開（公告）號: CN104778208A
• 公開（公告）日: 2015-07-15
• 發明（設計）人: 趙業東;彭發文
• 申請（專利權）人: 趙業東;彭發文
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京輕創知識產權代理有限公司 11212
• 代理人: 楊立

技術領域

本發明涉及互聯網大數據分析、通訊技術及計算機技術領域，尤其涉及一種搜索引擎SEO網站數據的優化抓取方法及系統。

背景技術

搜索引擎是針對“用戶使用網站的便利性”所提供的必要功能，同時也是“研究網站數據分析的一個有效工具”。高效的Spider檢索與延伸可以讓用戶快速精準地找到實用信息，從而更有效地提高用戶的分析能力，而且通過對網站訪問者搜索行為的深度分析，對分辨事物本質具有著重要的價值。鑒于搜索引擎營銷的環境發展為網絡營銷的推動起到舉足輕重的作用從效果營銷看，很多公司之所以可以應用網絡營銷是利用了搜索引擎營銷就完整型電子商務概念組成部分來看，網絡營銷是其中最重要的組成部分，是向終端客戶傳遞信息的重要環節。

但是，目前的數據抓取過程存在數據缺失現象，尤其當有些數據不存在網頁上，而是在微信或微博上，則不能被抓取，進而不能為用戶提供精準的數據搜索附圖，且現有技術不能精準的根據用戶的搜索習慣給出用戶需要的網絡數據，并且搜索結果的展現比較單一，且不直觀。

發明內容

本發明所要解決的技術問題是針對現有技術的不足，提供一種搜索引擎SEO網站數據的優化抓取方法及系統。

本發明解決上述技術問題的技術方案如下：一種搜索引擎SEO網站數據的優化抓取方法，包括如下步驟：

步驟1，接收用戶輸入的關鍵詞，對關鍵詞進行拓展，獲得多個長尾關?鍵詞；

步驟2，根據長尾關鍵詞進行精準搜索，抓取相關大數據；

步驟3，將獲得的相關大數據進行SEO自然排名，將排名數據及相關大數據內容發送至引擎服務器；

步驟4，所述引擎服務器對所述相關大數據內容進行大數據過濾，將過濾后的數據分類存儲；

步驟5，根據所述分類存儲的數據形成可視化圖表進行展示。

本發明的有益效果是：本申請中根據用戶的搜索習慣對輸入的關鍵詞進行拓展，為用戶提供最需要的搜索數據，根據拓展的長尾關鍵詞抓取大數據，不僅包括網站數據，還包括微信微博等數據，克服數據缺失現象，并對抓取的數據進行分類存儲，生成可視化圖表進行展示，為用戶提供精準搜索體驗的同時，為用戶提供直觀明了的結果展現。

在上述技術方案的基礎上，本發明還可以做如下改進。

進一步，上述技術方案還包括提供蜂巢搜索，具體實現如下：

當用戶點擊蜂巢搜索鏈接，進入蜂巢搜索界面，進行JS蜂巢分析，根據關鍵詞生成分析報告。

進一步，進行JS蜂巢分析，根據關鍵詞生成分析報告的具體實現為：將可視化圖表按照分析報告的框架轉換成文字數據，生成分析報告。

采用上述進一步方案的有益效果：在蜂巢中形成可視化對比與分析，根據可視化的對比與分析形成數據報告，為用戶提供多樣的展示形式，滿足用戶的各種需求。

進一步，步驟1的具體實現為：接收用戶輸入的關鍵詞，查詢用戶的訪問記錄cookie，根據用戶的訪問記錄cookie分析用戶的搜索習慣，根據用戶的搜素習慣對用戶輸入的關鍵詞進行拓展，獲得相應的多個長尾關鍵詞。

進一步，步驟2中所述大數據包括新聞、問問、百科、微信、微博、論?壇、貼吧和文庫中的一種或幾種數據。

本發明解決上述技術問題的另一技術方案如下：一種搜索引擎SEO網站數據的優化抓取系統，包括關鍵詞拓展模塊、網站抓取模塊、第一數據處理模塊、第二數據處理模塊、數據存儲模塊和可視化模塊；

所述關鍵詞拓展模塊，其用于接收用戶輸入的關鍵詞，對關鍵詞進行拓展，獲得多個長尾關鍵詞；

所述網站抓取模塊，其用于根據長尾關鍵詞進行精準搜索，抓取相關大數據；

所述第一數據處理模塊，將獲得的相關大數據進行SEO自然排名，將排名數據及相關大數據內容發送至第二數據處理模塊；

第二數據處理模塊，其用于對所述相關大數據內容進行大數據過濾；

所述數據存儲模塊，請用于將過濾后的數據分類存儲；

所述可視化模塊，其用于根據所述分類存儲的數據形成可視化圖表進行展示。

在上述技術方案的基礎上，本發明還可以做如下改進。

進一步，上述技術方案還包括蜂巢搜索模塊，其用于當用戶點擊蜂巢搜索鏈接，進入蜂巢搜索界面，進行JS蜂巢分析，根據關鍵詞生成分析報告。

進一步，所述蜂巢搜索模塊將可視化圖表按照分析報告的框架轉換成文字數據，生成分析報告。

進一步，所述關鍵詞拓展模塊包括接收單元、查詢單元、分析單元和拓展單元；

所述接收單元，其用于接收用戶輸入的關鍵詞；