[發明專利]一種數據處理方法和裝置

在審

• 申請號: 201710134937.1
• 申請日: 2017-03-08
• 公開（公告）號: CN106991131A
• 公開（公告）日: 2017-07-28
• 發明（設計）人: 李哲君;衛華飛;趙平西
• 申請（專利權）人: 陜西識代運籌信息科技股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京眾達德權知識產權代理有限公司11570
• 代理人: 劉杰

1.一種數據處理方法，應用于對網頁的數據采集，其特征在于，所述方法包括：

獲得第一網頁；

根據所述第一網頁獲得所述第一網頁的對象；

根據所述對象和所述第一網頁獲得所述第一網頁和所述對象之間的第一映射關系；

獲得第二網頁，其中，所述第一網頁和所述第二網頁具有相同的屬性信息；

根據所述第一映射關系獲得待獲取元素在所述第二網頁中的位置；

根據所述第一映射關系獲得所述待獲取元素在所述位置的數據；

判斷所述數據的數據類型；

當所述數據類型是基本數據類型時，對所述數據進行標準化處理。

2.如權利要求1所述的方法，其特征在于，所述方法還包括：

將所述標準化處理后的數據存儲到數據庫中。

3.如權利要求1所述的方法，其特征在于，所述對象還包括定位注解，所述根據所述第一映射關系獲得待獲取元素在所述第二網頁中的位置，具體為：

根據定位注解獲得待獲取元素在所述第二網頁中的位置。

4.如權利要求1所述的方法，其特征在于，所述對象還包括取值注解，所述根據所述第一映射關系獲得所述待獲取元素在所述位置的數據，具體為：

通過調用取值注解獲得所述待獲取元素在所述位置的數據。

5.如權利要求1所述的方法，其特征在于，所述方法還包括：

當所述數據類型不是基本數據類型時，則獲得第三網頁，其中，所述第一網頁和所述第三網頁具有相同的屬性信息。

6.一種數據處理裝置，其特征在于，所述裝置包括：

第一獲得單元，所述第一獲得單元用于獲得第一網頁；

第二獲得單元，所述第二獲得單元用于根據所述第一網頁獲得所述第一網頁的對象；

第三獲得單元，所述第三獲得單元用于根據所述對象和所述第一網頁獲得所述第一網頁和所述對象之間的第一映射關系；

第四獲得單元，所述第四獲得單元用于獲得第二網頁，其中，所述第一網頁和所述第二網頁具有相同的屬性信息；

第五獲得單元，所述第五獲得單元用于根據所述第一映射關系獲得待獲取元素在所述第二網頁中的位置；

第六獲得單元，所述第六獲得單元用于根據所述第一映射關系獲得所述待獲取元素在所述位置的數據；

第一判斷單元，所述第一判斷單元用于判斷所述數據的數據類型；

第一處理單元，所述第一處理單元用于當所述數據類型是基本數據類型時，對所述數據進行標準化處理。

7.如權利要求6所述的裝置，其特征在于，所述裝置還包括：

第一存儲單元，所述第一存儲單元用于將所述標準化處理后的數據存儲到數據庫中。

8.如權利要求6所述的方法，其特征在于，所述裝置還包括：

第七獲得單元，所述第七獲得單元用于根據定位注解獲得待獲取元素在所述第二網頁中的位置。

9.如權利要求6所述的方法，其特征在于，所述裝置還包括：

第八獲得單元，所述第八獲得單元用于通過調用取值注解獲得所述待獲取元素在所述位置的數據。

10.如權利要求6所述的方法，其特征在于，所述方法還包括：

第九獲得單元，所述第九獲得單元用于當所述數據類型不是基本數據類型時，則獲得第三網頁，其中，所述第一網頁和所述第三網頁具有相同的屬性信息。