[發明專利]網頁源碼數據處理方法、裝置及計算機設備在審
| 申請號： | 202010075085.5 | 申請日： | 2020-01-22 |
| 公開（公告）號： | CN111291083A | 公開（公告）日： | 2020-06-16 |
| 發明（設計）人： | 范金喬;沈鵬;李國輝 | 申請（專利權）人： | 奇安信科技集團股份有限公司;網神信息技術（北京）股份有限公司 |
| 主分類號： | G06F16/2455 | 分類號： | G06F16/2455;G06F16/28;G06F16/957 |
| 代理公司： | 北京英特普羅知識產權代理有限公司 11015 | 代理人： | 鄧小玲;王勇 |
| 地址： | 100088 北京市西城區*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 網頁 源碼 數據處理 方法 裝置 計算機 設備 | ||
1.一種網頁源碼數據處理方法，其特征在于，包括：
獲取網頁源碼數據；
將所述網頁源碼數據存儲至多級緩存中，其中，不同級別的緩存用于存儲不同時間段內的網頁源碼數據，不同級別的緩存的類型不同；
將所述多級緩存中的其中一級緩存中存儲時間超過預設時間的網頁源碼數據轉存至預設的非關系型數據庫中。
2.根據權利要求1所述的網頁源碼數據處理方法，其特征在于，所述多級緩沖包括第一級緩存、第二級緩存，所述將所述網頁源碼數據存儲至多級緩存中的步驟包括：
將第一預設時間段內的網頁源碼數據存儲至第一級緩存中，將第二預設時間段內的網頁源碼數據存儲至第二級緩存中，所述第二預設時間段包括所述第一預設時間段。
3.根據權利要求2所述的網頁源碼數據處理方法，其特征在于，所述將所述多級緩存中的其中一級緩存中存儲時間超過預設時間的網頁源碼數據轉存至預設的非關系型數據庫中的步驟包括：
將所述第二級緩存中存儲時間超過預設時間的網頁源碼數據轉存至預設的非關系型數據庫中。
4.根據權利要求2所述的網頁源碼數據處理方法，其特征在于，所述第一級緩存為redis數據庫，所述第二級緩存為mongo數據庫，所述非關系型數據庫為hbase數據庫。
6.根據權利要求4所述的網頁源碼數據處理方法，其特征在于，所述網頁源碼數據處理方法還包括：
接收數據查詢請求；
響應于所述數據查詢請求，根據所述數據查詢請求依次查詢所述redis數據庫、所述mongo數據庫以及所述hbase數據庫，獲取與所述查詢請求對應的網頁源碼數據。
7.一種網頁源碼數據處理裝置，其特征在于，包括：
獲取模塊，用于獲取網頁源碼數據；
存儲模塊，用于將所述網頁源碼數據存儲至多級緩存中，其中，不同級別的緩存用于存儲不同時間段內的網頁源碼數據，不同級別的緩存的類型不同；
轉存模塊，用于將所述多級緩存中的其中一級緩存中存儲時間超過預設時間的網頁源碼數據轉存至預設的非關系型數據庫中。
8.根據權利要求7所述的網頁源碼數據處理裝置，其特征在于，所述多級緩沖包括第一級緩存、第二級緩存，所述存儲模塊還用于將第一預設時間段內的網頁源碼數據存儲至第一級緩存中，將第二預設時間段內的網頁源碼數據存儲至第二級緩存中，所述第二預設時間段包括所述第一預設時間段。
9.一種計算機設備，其特征在于，包括存儲器、處理器以及存儲在所述存儲器上并可在所述處理器上運行的計算機程序，所述處理器執行所述計算機程序時實現權利要求1至6任一項所述的網頁源碼數據處理方法的步驟。
10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于：所述計算機程序被處理器執行時實現權利要求1至6任一項所述的網頁源碼數據處理方法的步驟。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于奇安信科技集團股份有限公司;網神信息技術（北京）股份有限公司，未經奇安信科技集團股份有限公司;網神信息技術（北京）股份有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202010075085.5/1.html，轉載請聲明來源鉆瓜專利網。
- 上一篇：一種便攜式演講裝置
- 下一篇：磁共振成像方法、裝置、電子設備、存儲介質
