[發明專利]一種用于自動化測試的頁面元素定位方法和裝置

在審

• 申請號: 201711307879.4
• 申請日: 2017-12-11
• 公開（公告）號: CN109901988A
• 公開（公告）日: 2019-06-18
• 發明（設計）人: 張慧
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06K9/20;G06K9/46;G06K9/62
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;楊曉偉

1.一種用于自動化測試的頁面元素定位方法，其特征在于，包括：

通過圖像識別算法獲取待識別頁面的所有特征點；

將每個所述特征點分別與頁面元素對應的標準圖像進行匹配，以獲取多個匹配點；

根據各所述匹配點確定所述頁面元素在所述待識別頁面中的位置。

2.根據權利要求1所述的方法，其特征在于，所述通過圖像識別算法獲取待識別頁面的所有特征點，包括：

構建待識別頁面中每個像素點的黑森矩陣，以得到每個像素點的特征值；

對每個像素點的特征值分別進行非極大值抑制處理，以確定所述待識別頁面的所有初步特征點；

選取每個所述初步特征點的主方向；

根據每個所述初步特征點所在的尺度值以及所述主方向，為每個所述初步特征點分別構造一個特征向量，所述特征向量即為所述特征點。

3.根據權利要求1所述的方法，其特征在于，所述將每個所述特征點分別與頁面元素對應的標準圖像進行匹配，以獲取多個匹配點，包括：

分別計算所述待識別頁面中每個所述特征點與標準圖像的所有特征點的歐式距離；

分別確認每個所述特征點對應的最小的歐氏距離和次最小的歐氏距離的比值小于設定的閾值，所述特征點與對應最小歐氏距離的特征點構成匹配點對；

通過隨機抽樣一致性算法去除所述匹配點對中的匹配錯誤的匹配點對，以獲取多個匹配點。

4.根據權利要求1所述的方法，其特征在于，所述根據各所述匹配點確定所述頁面元素在所述待識別頁面中的位置，包括：根據各所述匹配點確定匹配中心點，將所述匹配中心點在屏幕的坐標作為所述頁面元素在所述待識別頁面中的位置。

5.根據權利要求1至4的任一項所述的方法，其特征在于，所述圖像識別算法為SURF算法。

6.一種用于自動化測試的頁面元素定位裝置，其特征在于，包括：

獲取模塊，用于通過圖像識別算法獲取待識別頁面的所有特征點；

匹配模塊，用于將每個所述特征點分別與所述頁面元素對應的標準圖像進行匹配，以獲取多個匹配點；

確定模塊，用于根據各所述匹配點確定所述頁面元素在所述待識別頁面中的位置。

7.根據權利要求6所述的裝置，其特征在于，所述獲取模塊，還用于：

構建待識別頁面中每個像素點的黑森矩陣，以得到每個像素點的特征值；

對每個像素點的特征值分別進行非極大值抑制處理，以確定所述待識別頁面的所有初步特征點；

選取每個所述初步特征點的主方向；以及

根據每個所述初步特征點所在的尺度值以及所述主方向，為每個所述初步特征點分別構造一個特征向量，所述特征向量即為所述特征點。

8.根據權利要求6所述的裝置，其特征在于，所述匹配模塊，還用于：

分別計算所述待識別頁面中每個所述特征點與標準圖像的所有特征點的歐式距離；

分別確認每個所述特征點對應的最小的歐氏距離和次最小的歐氏距離的比值小于設定的閾值，所述特征點與對應最小歐氏距離的特征點構成匹配點對；以及

通過隨機抽樣一致性算法去除所述匹配點對中的匹配錯誤的匹配點對，以獲取多個匹配點。

9.根據權利要求6所述的裝置，其特征在于，所述確定模塊，還用于：根據各所述匹配點確定匹配中心點，將所述匹配中心點在屏幕的坐標作為所述頁面元素在所述待識別頁面中的位置。

10.一種電子設備，其特征在于，包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當所述一個或多個程序被所述一個或多個處理器執行，使得所述一個或多個處理器實現如權利要求1-5中任一所述的方法。

11.一種計算機可讀介質，其上存儲有計算機程序，其特征在于，所述程序被處理器執行時實現如權利要求1-5中任一所述的方法。