[發明專利]頁面控件定位方法、裝置及存儲介質

在審

• 申請號: 202310873430.3
• 申請日: 2023-07-17
• 公開（公告）號: CN116594916A
• 公開（公告）日: 2023-08-15
• 發明（設計）人: 梁穎霖
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06F9/451
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 譚英強;孫浩

本發明公開了一種頁面控件定位方法、裝置及存儲介質，當獲取到頁面測試用例中的用例控件描述信息，確定待測試頁面中的多個候選無文字描述控件，然后根據各個候選無文字描述控件，在圖文映射信息庫中獲取各個候選無文字描述控件對應的控件標簽信息，接著調用無文字描述控件匹配模型將用例控件描述信息與各個控件標簽信息進行控件匹配，得到各個候選無文字描述控件對應的第一匹配度，當根據第一匹配度確定所有候選無文字描述控件中存在與用例控件描述信息相匹配的目標無文字描述控件，在待測試頁面中對目標無文字描述控件進行定位。本發明實施例能夠對待測試頁面中的無文字描述控件進行定位。

技術領域

本發明涉及自動化測試技術領域，尤其涉及一種頁面控件定位方法、裝置及存儲介質。

背景技術

在針對應用程序的自動化測試過程中，需要模擬用戶對應用程序的待測試頁面中的控件進行操作，而在模擬用戶對應用程序的待測試頁面中的控件進行操作之前，需要先對待測試頁面中的待操作控件進行定位，使得待操作控件與測試用例中的用例控件相對應，以便于在運行測試用例時，可以根據用例控件模擬用戶對待操作控件的操作。

在相關技術中，常常采用將用例控件的描述信息與待操作控件的文本描述信息進行匹配的方式在待測試頁面中確定用例控件對應的待操作控件。但是，這種方式僅適用于對有文字描述控件的定位，當需要對待測試頁面中的無文字描述控件進行定位時，這種方式并不適用。

發明內容

以下是對本文詳細描述的主題的概述。本概述并非是為了限制權利要求的保護范圍。

本發明實施例提供了一種頁面控件定位方法、裝置及存儲介質，能夠對待測試頁面中的無文字描述控件進行定位。

一方面，本發明實施例提供了一種頁面控件定位方法，包括以下步驟：

獲取頁面測試用例中的用例控件描述信息；

確定待測試頁面中的多個候選無文字描述控件，根據各個所述候選無文字描述控件，在預設的圖文映射信息庫中獲取各個所述候選無文字描述控件對應的控件標簽信息；

調用預訓練的無文字描述控件匹配模型，將各個所述控件標簽信息與所述用例控件描述信息進行控件匹配，得到各個所述候選無文字描述控件對應的第一匹配度；

當根據所述第一匹配度確定所有所述候選無文字描述控件中存在與所述用例控件描述信息相匹配的目標無文字描述控件，在所述待測試頁面中對所述目標無文字描述控件進行定位。

另一方面，本發明實施例還提供了一種頁面控件定位裝置，包括：

第一獲取單元，用于獲取頁面測試用例中的用例控件描述信息；

標簽獲取單元，用于確定待測試頁面中的多個候選無文字描述控件，根據各個所述候選無文字描述控件，在預設的圖文映射信息庫中獲取各個所述候選無文字描述控件對應的控件標簽信息；

控件匹配單元，用于調用預訓練的無文字描述控件匹配模型，將各個所述控件標簽信息與所述用例控件描述信息進行控件匹配，得到各個所述候選無文字描述控件對應的第一匹配度；

第一定位單元，用于當根據所述第一匹配度確定所有所述候選無文字描述控件中存在與所述用例控件描述信息相匹配的目標無文字描述控件，在所述待測試頁面中對所述目標無文字描述控件進行定位。

可選地，所述頁面控件定位裝置還包括：

插圖獲取單元，用于獲取各個所述候選無文字描述控件對應的設計插圖；

標簽配置單元，用于為各個所述候選無文字描述控件對應的所述設計插圖配置所述控件標簽信息；

信息庫構建單元，用于根據所述設計插圖和所述控件標簽信息構建所述圖文映射信息庫。

可選地，所述頁面控件定位裝置還包括：

第二獲取單元，用于當檢測到所述待測試頁面所對應的應用程序的頁面控件信息發生了更新，在所述頁面控件信息中獲取發生更新的目標控件信息；