[發明專利]一種網站的識別方法及裝置

有效

• 申請號: 201710565741.8
• 申請日: 2017-07-12
• 公開（公告）號: CN109274632B
• 公開（公告）日: 2021-05-11
• 發明（設計）人: 付為民;郝建忠;鄭浩彬;陳濤;鄔學農
• 申請（專利權）人: 中國移動通信集團廣東有限公司;中國移動通信集團公司
• 主分類號: H04L29/06
• 分類號: H04L29/06
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 王瑩;曹杰

本發明實施提供一種網站的識別方法及裝置，所述方法包括：接收用戶訪問網站的統一資源定位器URL請求，在白名單中查找所述URL請求對應的URL，若在所述白名單中查找到所述URL請求對應的URL，則連接所述URL請求對應的URL；在黑名單中查找所述URL請求對應的URL，若在所述黑名單中查找到所述URL請求對應的URL，則生成高危風險提示信息；若在所述白名單和所述黑名單中均沒有查找到所述URL請求對應的URL，則根據預設規則計算所述URL請求對應的URL的各個特征權重值，并根據所述各個特征權重值識別所述URL請求對應的URL是否為異常網站。本發明實施例實現了快速準確高效地識別異常網站，并有效地降低了系統的誤判率，提升了用戶體驗。

技術領域

本發明涉及計算機技術領域，具體涉及一種網站的識別方法及裝置。

背景技術

隨著移動互聯網的高速發展，用戶瀏覽網站信息的途徑已經從單一的PC端越來越多轉變為移動端設備。2016年6月22日，中國互聯網絡信息中心(CNNIC)在北京發布第37次《中國互聯網絡發展狀況統計報告》，報告顯示：截至2015年12月，我國網民規模達6.88億，其中手機網民規模達6.20億，占比高達90.12％。

與此同時手機客戶端的安全問題也日益凸顯，2015年我國境內活躍的智能手機聯網終端達11.3億部，以“仿冒、釣魚網站、惡意程序”為首的問題日益增多，給用戶上網安全帶來了威脅，造成錢財的損失或者個人信息的泄露。

目前運營商對手機客戶端請求的統一資源定位器(Uniform Resoure Locator：以下簡稱URL)在網絡側主要通過黑名單方式進行攔截。

黑名單方法：在無線應用協議(Wireless Application Protocol：以下簡稱WAP)為WAP網關配置黑名單列表，手機http請求到達WAP網關后，網關分析超文本傳輸協議(HyperText Transfer Protocol，HTTP)頭中的URL，并依次檢索匹配，如果次URL在黑名單中命中，則WAP網關不再代理請求，直接返回給手機終端403，拒絕訪問該頁面。

黑名單方法的優點：簡單直接，凡是命中黑名單的URL網關都不再進行下一步做代理請求，由于代理網關無需向原始服務器做請求，因此能夠減輕代理網關的負荷。手機終端直接得到403拒絕訪問的頁面(瀏覽器或應用程序app呈現)。

黑名單方法缺點：

1、目前黑名單部署在WAP網關，需要用戶在終端設置10.0.0.172代理，如果不設置代理，則用戶上網流量不經過WAP網關，就無法攔截。

據統計，目前90％以上的用戶都不在終端側設置10.0.0.172代理，該攔截方案對此部分用戶沒有效果。

2、黑名單攔截方式，頁面過于簡單，會導致用戶誤以為網絡故障，體驗較差。

用戶訪問非法的網站，多數是從非法短信/郵件/廣告等的推送得到，用戶本身并不知曉自己訪問的網站是非法的/有害的/錯誤的。黑名單的處理方式，有效地阻止了用戶的訪問，但是用戶得到一個過于簡單的拒絕訪問頁面，用戶會誤認為網絡或者網站服務存在問題，降低用戶對運營商網絡或者網站的評價。另外，該方式容易導致用戶反復嘗試訪問，或者客戶端自動嘗試重新訪問，這樣隨著“仿冒、釣魚網站”的增多，黑名單也越來越大，過大的黑名單意味著每次匹配需要更長的時間。這增加了代理網關的處理負荷，降低代理網關處理效率，從而降低用戶上網速度。

3、傳統的黑名單攔截方式要求數據準確度非常高，為了確保不會誤攔正常網站，需要大量的人工去逐個審核，耗時耗力，無法針對整個互聯網上的數以幾十億計的疑似網站進行逐一審核。另外，仿冒、釣魚網站具有域名變化頻繁、相似度高、時效性短等特點，所以傳統黑名單方式已經不適應當前需求。

4、傳統的黑名單攔截方式對于絕大部分的疑似網站不能靈活處理，如果加入黑名單直接攔截容易引起網站的投訴，如果不做任何處理又確實存在泄露客戶隱私的風險。