[發明專利]網絡爬蟲系統有效
| 申請號: | 201210495699.4 | 申請日: | 2012-11-28 |
| 公開(公告)號: | CN103853717B | 公開(公告)日: | 2018-10-12 |
| 發明(設計)人: | 劉濤 | 申請(專利權)人: | 北京京東尚科信息技術有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 上海弼興律師事務所 31283 | 代理人: | 薛琦;王婧荷 |
| 地址: | 100195 北京市海淀區杏石口路6*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 網絡 爬蟲 | ||
1.一種網絡爬蟲系統,其特征在于,其包括一內核以及一Ajax抓取配置,該內核以及該Ajax抓取配置均集成有htmlunit,該Ajax抓取配置用于指定一網頁的地址以及該網頁中的待抓取的數據,該內核用于驅動搜索引擎,并基于該Ajax抓取配置提取該待抓取的數據;該Ajax抓取配置的root節點下設置有Ajax節點,該內核還用于在讀取該Ajax節點的內容后加載該網頁的頁面并執行包含有異步請求的JavaScript腳本以抓取該待抓取的數據。
2.如權利要求1所述的網絡爬蟲系統,其特征在于,該Ajax節點包括操作類元素和提取類元素,該操作類元素用于模擬用戶的操作,該提取類元素用于指定該待抓取的數據。
3.如權利要求1-2中任意一項所述的網絡爬蟲系統,其特征在于,該網絡爬蟲系統還包括一安裝包,該安裝包用于負責該網絡爬蟲系統的更新和啟動。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京京東尚科信息技術有限公司,未經北京京東尚科信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201210495699.4/1.html,轉載請聲明來源鉆瓜專利網。





