[發明專利]頁面顯示異常的檢測方法、裝置及存儲介質

在審

• 申請號: 201911291236.4
• 申請日: 2019-12-16
• 公開（公告）號: CN111078552A
• 公開（公告）日: 2020-04-28
• 發明（設計）人: 陳興;黃冰菁;黃晶
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06K9/46;G06K9/62
• 代理公司: 深圳翼盛智成知識產權事務所(普通合伙) 44300
• 代理人: 彭緒坤

1.一種頁面顯示異常的檢測方法，其特征在于，包括：

獲取目標顯示頁面的第一頁面圖像；

根據特征提取算法，從所述第一頁面圖像中提取控件元素的第一特征圖；

按照多組池化參數分別對所述第一特征圖進行池化處理，得到多組特征，并對所述多組特征進行合并處理，生成預設維度的特征向量；

基于預設分類算法和所述特征向量，檢測所述控件元素是否在所述目標顯示頁面上顯示異常。

2.如權利要求1所述的頁面顯示異常的檢測方法，其特征在于，根據特征提取算法，從所述第一頁面圖像中提取控件元素的第一特征圖，包括：

獲取所述目標顯示頁面對應的第一控件樹數據；

基于所述第一控件樹數據從所述目標顯示頁面上提取第一控件圖像；

根據特征提取算法，從所述第一控件圖像中提取所述控件元素的第一特征圖。

3.如權利要求1所述的頁面顯示異常的檢測方法，其特征在于，基于預設分類算法和所述特征向量，檢測所述控件元素是否在所述目標顯示頁面上顯示異常之后，還包括：

若檢測到所述控件元素在所述目標顯示頁面上顯示異常，則確定所述預設分類算法識別到的異常類別，并輸出所述異常類別。

4.如權利要求1所述的頁面顯示異常的檢測方法，其特征在于，根據特征提取算法，從所述第一頁面圖像中提取控件元素的第一特征圖；按照多組池化參數分別對所述第一特征圖進行池化處理，得到多組特征，并對所述多組特征進行合并處理，生成預設維度的特征向量；基于預設分類算法和所述特征向量，檢測所述控件元素是否在所述目標顯示頁面上顯示異常，包括：

通過訓練后的異常識別網絡的卷積層提取所述控件元素的第一特征圖，其中，所述異常識別網絡依次包括卷積層、空間金字塔池化層以及全連接層；

根據所述空間金字塔池化層，按照多個多組池化參數分別對所述第一特征圖進行池化處理得到多組特征，對所述多組特征合并處理，生成具有預設維度的特征向量；

將所述特征向量輸入所述全連接層進行計算，以檢測所述目標顯示頁面的控件顯示異常，并輸出檢測結果。

5.如權利要求4所述的頁面顯示異常的檢測方法，其特征在于，所述卷積層的卷積核大小為m×n，其中，m≥1，n≥1，且m≠n。

6.如權利要求4所述的頁面顯示異常的檢測方法，其特征在于，所述獲取目標顯示頁面的第一頁面圖像的步驟之前，還包括：

在被測終端上運行目標應用，并遍歷所述目標應用的顯示頁面，以獲取所述顯示頁面的第二頁面圖像和所述顯示頁面對應第二控件樹數據；

基于所述第二控件樹數據從所述第二頁面圖像中截取第二控件圖像，并基于所述第二控件圖像生成正樣本；

基于所述第二控件樹數據對提取的第二控件圖像進行疊加和/或變形處理，生成負樣本；

根據所述正樣本和所述負樣本對預先構建的異常識別網絡進行訓練，以確定網絡參數。

7.如權利要求6所述的頁面顯示異常的檢測方法，其特征在于，所述基于所述第二控件樹數據從所述第二頁面圖像中截取第二控件圖像的步驟，包括：

根據所述第二控件樹數據，獲取所述顯示頁面中各控件元素在所述顯示頁面中的位置信息；

根據所述位置信息，從所述樣本第二頁面圖像中截取所述控件元素的第二控件圖像。

8.如權利要求6所述的頁面顯示異常的檢測方法，其特征在于，所述基于所述第二控件圖像生成正樣本的步驟包括：

確定所述被測終端的第一分辨率，并獲取預設機型數據對應的第二分辨率；

根據所述第一分辨率與所述第二分辨，得到縮放比例；

按照所述縮放比例對所述第二控件圖像進行縮放處理，得到第三控件圖像；

為所述第二控件圖像和所述第三控件圖像添加類別標簽后，作為正樣本。