[發明專利]瀏覽器數據采集系統及方法

在審

• 申請號: 202010732497.1
• 申請日: 2020-07-27
• 公開（公告）號: CN111767450A
• 公開（公告）日: 2020-10-13
• 發明（設計）人: 柳齊;李金良
• 申請（專利權）人: 深圳快學教育科技有限公司
• 主分類號: G06F16/953
• 分類號: G06F16/953;G06F16/904;G06F16/28
• 代理公司: 深圳市中科創為專利代理有限公司 44384
• 代理人: 彭濤;劉曰瑩

1.一種瀏覽器數據采集系統，其特征在于：所述瀏覽器數據采集系統包括界面模塊及采集模塊，

所述界面模塊用于展示瀏覽器可視化的界面；

所述采集模塊用于采集瀏覽器上的數據。

2.如權利要求1所述的瀏覽器數據采集系統，其特征在于：所述界面模塊包括用于展示功能的工具模塊、列表欄，

所述工具模塊設置有用于新增、刪除或修改功能的按鍵模塊；所述瀏覽器數據采集系統還包括腳本模塊，

所述列表欄包括腳本編輯區，所述腳本編輯區用于對腳本模塊進行增加、刪除、修改的操作。

3.如權利要求1所述的瀏覽器數據采集系統，其特征在于：所述瀏覽器數據采集系統還包括代理模塊，所述代理模塊用于在IP受限時訪問瀏覽器網站。

4.如權利要求3所述的瀏覽器數據采集系統，其特征在于：所述瀏覽器數據采集系統還包括數據庫模塊，所述數據庫模塊用于存儲采集模塊所采集的數據及代理模塊運行的一部分數據。

5.如權利要求4所述的瀏覽器數據采集系統，其特征在于：所述瀏覽器數據采集系統還包括自定義變量模塊，所述自定義變量模塊的值從數據庫模塊中或文本中導入獲取，所述代理模塊運行的另一部分數據存儲在自定義變量模塊中。

6.如權利要求4所述的瀏覽器數據采集系統，其特征在于：所述數據庫模塊的類型為access型、sqlite型、mysql型或sqlserver型。

7.如權利要求1所述的瀏覽器數據采集系統，其特征在于：所述瀏覽器數據采集系統支持CEF內核。

8.一種瀏覽器數據采集方法，其采用如權利要求1-8任一項所述的瀏覽器數據采集系統，其特征在于：包括如下步驟：

步驟S1：執行腳本；

步驟S2：設置cookie，及打開瀏覽器；

步驟S3：設置代理并讀取操作配置文件；

步驟S4：設置代理并通過腳本點擊操作。

9.如權利要求8所述的瀏覽器數據采集方法，其特征在于：所述步驟S4還包括如下步驟：

步驟S41：模擬鼠標操作；

步驟S42：自動抓取數據；

步驟S43：模擬鍵盤操作并進行自動下載。

10.如權利要求8所述的瀏覽器數據采集方法，其特征在于：所述瀏覽器數據采集方法還包括如下步驟：

步驟S5：返回步驟S4并進行批量操作。