[發明專利]一種用于自動化測試的頁面元素定位方法和裝置

在審

• 申請號: 201711307879.4
• 申請日: 2017-12-11
• 公開（公告）號: CN109901988A
• 公開（公告）日: 2019-06-18
• 發明（設計）人: 張慧
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06K9/20;G06K9/46;G06K9/62
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;楊曉偉

本發明公開了一種用于自動化測試的頁面元素定位方法和裝置，涉及計算機技術領域。該方法的一具體實施方式包括：通過圖像識別算法獲取待識別頁面的所有特征點；將每個所述特征點分別與頁面元素對應的標準圖像進行匹配，以獲取多個匹配點；根據各所述匹配點確定所述頁面元素在所述待識別頁面中的位置。該實施方式通過圖像識別算法來輔助自動化測試框架以精確定位待識別頁面的頁面元素，提高了對頁面元素的識別、定位精度，進而提高了測試效率。

技術領域

本發明涉及計算機領域，尤其涉及一種用于自動化測試的頁面元素定位方法和裝置。

背景技術

在安卓UI(User Interface，用戶界面)自動化測試中，安裝好要測試的應用后，分析該應用中的所有頁面元素以確保各頁面元素能夠被測試框架獲取到?，F有技術中可以通過UiAutomator來分析獲取頁面元素，其中，UiAutomator是用于安卓的自動化測試框架，基本上支持所有的安卓事件操作，可以不查看源碼來抓取應用界面上的頁面元素。

在實現本發明過程中，發明人發現現有技術中至少存在如下問題：自動化測試中，需要對頁面元素進行識別、定位，然而UiAutomator識別、定位頁面元素的準確率較低，經常由于頁面元素識別錯誤而導致測試用例執行中斷，如果想要繼續執行測試則需要重新運行測試腳本，影響測試效率。

發明內容

有鑒于此，本發明實施例提供一種用于自動化測試的頁面元素定位方法和裝置，通過圖像識別算法來輔助自動化測試框架以精確定位待識別頁面的頁面元素，該方式提高了對頁面元素的識別、定位精度，進而提高了測試效率。

為實現上述目的，根據本發明實施例的一個方面，提供了一種用于自動化測試的頁面元素定位方法。

本發明實施例的一種用于自動化測試的頁面元素定位方法，包括：通過圖像識別算法獲取待識別頁面的所有特征點；將每個所述特征點分別與頁面元素對應的標準圖像進行匹配，以獲取多個匹配點；根據各所述匹配點確定所述頁面元素在所述待識別頁面中的位置。

可選地，所述通過圖像識別算法獲取待識別頁面的所有特征點，包括：構建待識別頁面中每個像素點的黑森矩陣，以得到每個像素點的特征值；對每個像素點的特征值分別進行非極大值抑制處理，以確定所述待識別頁面的所有初步特征點；選取每個所述初步特征點的主方向；根據每個所述初步特征點所在的尺度值以及所述主方向，為每個所述初步特征點分別構造一個特征向量，所述特征向量即為所述特征點。

可選地，所述將每個所述特征點分別與頁面元素對應的標準圖像進行匹配，以獲取多個匹配點，包括：分別計算所述待識別頁面中每個所述特征點與標準圖像的所有特征點的歐式距離；分別確認每個所述特征點對應的最小的歐氏距離和次最小的歐氏距離的比值小于設定的閾值，所述特征點與對應最小歐氏距離的特征點構成匹配點對；通過隨機抽樣一致性算法去除所述匹配點對中的匹配錯誤的匹配點對，以獲取多個匹配點。

可選地，所述根據各所述匹配點確定所述頁面元素在所述待識別頁面中的位置，包括：根據各所述匹配點確定匹配中心點，將所述匹配中心點在屏幕的坐標作為所述頁面元素在所述待識別頁面中的位置。

可選地，所述圖像識別算法為SURF算法。

為實現上述目的，根據本發明實施例的一個方面，提供了一種用于自動化測試的頁面元素定位裝置。

本發明實施例的一種用于自動化測試的頁面元素定位裝置，包括：獲取模塊，用于通過圖像識別算法獲取待識別頁面的所有特征點；匹配模塊，用于將每個所述特征點分別與所述頁面元素對應的標準圖像進行匹配，以獲取多個匹配點；確定模塊，用于根據各所述匹配點確定所述頁面元素在所述待識別頁面中的位置。