[發明專利]一種資源下載方法、裝置、終端設備及存儲介質在審
| 申請號: | 202011609706.X | 申請日: | 2020-12-30 |
| 公開(公告)號: | CN112667898A | 公開(公告)日: | 2021-04-16 |
| 發明(設計)人: | 劉均;楊詩雨 | 申請(專利權)人: | 深圳市轱轆車聯數據技術有限公司 |
| 主分類號: | G06F16/9535 | 分類號: | G06F16/9535;G06F16/955;G06F9/451;G06K9/32;H04L29/08 |
| 代理公司: | 深圳中一聯合知識產權代理有限公司 44414 | 代理人: | 梁立耀 |
| 地址: | 518000 廣東省深圳市*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 資源 下載 方法 裝置 終端設備 存儲 介質 | ||
本申請適用于計算機技術領域,提供一種資源下載方法、裝置、終端設備及存儲介質。其中,方法包括:在第一數據表中查詢到正在下載或未下載的目標資源時,查找第二數據表中目標資源是否為已下載狀態;在第二數據表中所述目標資源不為已下載狀態時,根據對應下載地址下載所述目標資源;在目標資源下載成功時,將第一數據表與所述第二數據表中目標資源的下載狀態更新為下載完成狀態。本申請實施例通過第一數據表和第二數據表記錄下載狀態,并更新第一數據表和第二數據表的下載狀態,可保證在下載中斷后重新下載或者下載資源過多時,根據兩個數據表中的下載狀態自動進行下載,可無縫銜接,不會出現遺漏或者重復下載的情況,從而提高了下載效率。
技術領域
本申請屬于計算機技術領域,尤其涉及一種資源下載方法、裝置、終端設備及存儲介質。
背景技術
隨著計算機技術的發展,可進行自動化下載網絡資源,目前自動化下載網絡資源通常是通過網絡爬蟲的技術實現,網絡爬蟲是一種自動抓取網頁并提取網頁內容的程序,在提取網頁內容時通常是對抓取的網頁進行解析得到網頁結構,再解析出網頁上的下載按鈕來實現下載數據,從而獲取資源。
然而,當頁面下載中斷或下載資源較多時,容易出現遺漏或重復下載的情況,使得下載效率低。
發明內容
本申請實施例提供了一種資源下載方法、裝置、終端設備及存儲介質,旨在解決現有資源自動下載時,在下載中斷或下載資源較多時,容易出現遺漏或重復下載的情況,使得下載效率低的問題。
第一方面,本申請實施例提供了一種資源下載方法,包括:
查詢第一數據表中的所有資源的下載狀態;所述第一數據表包括至少一條資源的下載狀態;
在所述第一數據表中查詢到正在下載或未下載的目標資源時,查找第二數據表中所述目標資源是否為已下載狀態;所述第二數據表包括所述目標資源的下載狀態及對應下載地址;
在所述第二數據表中所述目標資源不為已下載狀態時,根據對應下載地址下載所述目標資源;
在所述目標資源下載成功時,將所述第一數據表與所述第二數據表中所述目標資源的下載狀態更新為下載完成狀態。
在一個實施例中,所述在所述第一數據表中查詢到正在下載或未下載的目標資源時,查找第二數據表中所述目標資源是否為已下載狀態,包括:
在所述第一數據表中查詢到未下載的目標資源時,將所述第一數據表中目標數據的下載狀態更新為正在下載狀態,并查找第二數據表中所述目標資源是否為已下載狀態。
在一個實施例中,在所述第二數據表中所述目標資源不為已下載狀態時,根據對應下載地址下載所述目標資源之后,包括:
在所述目標資源未下載成功的時間段內,將所述第二數據表中所述目標數據的下載狀態更新為正在下載狀態。
在一個實施例中,所述下載地址包括統一資源定位符;
所述在所述第二數據表中所述目標資源不為已下載狀態時,根據對應下載地址下載所述目標資源,包括:
根據所述目標資源對應的統一資源定位符,進入所述目標數據所在的網頁;
對所述網頁進行圖像識別;
在識別出預設圖標時,確定鼠標點擊的位置信息;其中,所述預設圖標為預存儲鼠標點擊位置對應圖標的截圖圖像;
根據所述鼠標點擊的位置信息,點擊對應位置,以進行所述目標資源下載。
在一個實施例中,所述根據所述目標數據的統一資源定位符,進入所述目標數據所在的網頁,包括:
根據所述目標資源對應的統一資源定位符,通過selenium工具控制預設瀏覽器進入所述目標數據所在的網頁。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于深圳市轱轆車聯數據技術有限公司,未經深圳市轱轆車聯數據技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011609706.X/2.html,轉載請聲明來源鉆瓜專利網。





