[發(fā)明專利]一種控件識別方法和裝置

在審

• 申請?zhí)枺?/td>: 201910022902.8
• 申請日: 2019-01-10
• 公開（公告）號: CN109871316A
• 公開（公告）日: 2019-06-11
• 發(fā)明（設計）人: 蔣曉海;謝春鴻
• 申請（專利權）人: 北京云測信息技術有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京國昊天誠知識產權代理有限公司 11315
• 代理人: 劉昕;南霆

本申請公開了一種控件識別方法和裝置。該方法包括：獲取樣本數(shù)據集合，所述樣本數(shù)據集合中的樣本數(shù)據包括：用戶界面的界面截圖和所述用戶界面中的控件的屬性信息；基于所述樣本數(shù)據，訓練目標檢測模型；基于訓練完成的目標檢測模型，識別目標用戶界面中的控件。可見，本申請通過對目標檢測模型進行訓練，以僅需要用戶界面的界面截圖即可識別其中的控件，與現(xiàn)有技術中依賴于控件樹查找控件的方式相比，能夠有效避免原生測試框架獲取控件樹不穩(wěn)定導致的測試執(zhí)行不穩(wěn)定、自動化測試范圍小的問題。

技術領域

本申請涉及計算機技術領域，尤其涉及一種控件識別方法和裝置。

背景技術

軟件測試是指用來促進鑒定軟件的正確性、完整性、安全性和質量的過程。

目前的終端操作系統(tǒng)，由于其版本、屏幕尺寸、硬件組合等可能不同，以及廠商各自也可能對操作系統(tǒng)進行個性化擴展和修改，因此，操作系統(tǒng)自身的原生測試框架變得不可靠，導致終端上的控件無法被識別或識別不穩(wěn)定，進而影響軟件測試過程。

因此，需要提供一種更加可靠的控件識別方法。

發(fā)明內容

本說明書實施例提供一種控件識別方法，用于解決原生測試框架獲取控件樹不穩(wěn)定，導致的測試執(zhí)行不穩(wěn)定、自動化測試范圍小的問題。

本說明書實施例還提供一種控件識別方法，包括：

獲取樣本數(shù)據集合，所述樣本數(shù)據集合中的樣本數(shù)據包括：用戶界面的界面截圖和所述用戶界面中的控件的屬性信息；

基于所述樣本數(shù)據，訓練目標檢測模型；

基于訓練完成的目標檢測模型，識別目標用戶界面中的控件。

本說明書實施例還提供一種控件識別裝置，包括：

獲取模塊，用于獲取樣本數(shù)據集合，所述樣本數(shù)據集中的樣本數(shù)據包括：用戶界面的界面截圖和所述用戶界面中的控件的屬性信息；

訓練模塊，用于基于所述樣本數(shù)據，訓練目標檢測模型；

識別模塊，用于基于訓練完成的目標檢測模型，識別目標用戶界面中的控件。

本說明書實施例還提供一種電子設備，該電子設備包括處理器、存儲器及存儲在所述存儲器上并可在所述處理器上運行的計算機程序，所述計算機程序被所述處理器執(zhí)行時實現(xiàn)上述的軟件測試方法的步驟。

本說明書實施例還提供一種計算機可讀存儲介質，所述計算機可讀存儲介質上存儲計算機程序，所述計算機程序被處理器執(zhí)行時實現(xiàn)上述的軟件測試方法的步驟。

本說明書實施例采用的上述至少一個技術方案能夠達到以下有益效果：

通過采集用戶界面的界面截圖及其中的控件的屬性信息，并基于采集到的信息訓練目標檢測模型，以基于訓練完成的目標檢測模型識別目標用戶界面中的控件。與現(xiàn)有技術中通過控件樹查找用戶界面中的控件的方案相比，能有效避免控件樹獲取不穩(wěn)定導致的測試執(zhí)行不穩(wěn)定、自動化測試范圍小的問題，具有提高測試穩(wěn)定性和測試范圍的優(yōu)點。

附圖說明

此處所說明的附圖用來提供對本申請的進一步理解，構成本申請的一部分，本申請的示意性實施例及其說明用于解釋本申請，并不構成對本申請的不當限定。在附圖中：

圖1為本說明書提供的一種應用場景的示意圖；

圖2為本說明書一實施例提供的一種控件識別方法的流程示意圖；

圖3為本說明書一實施例提供的步驟260的一種實現(xiàn)方式的流程示意圖；

圖4為本說明書一實施例提供的一種腳本錄制和回放步驟的流程示意圖；