[發(fā)明專利]一種基于圖像識別的WebUI自動化測試方法

在審

• 申請?zhí)枺?/td>: 202011383670.8
• 申請日: 2020-12-01
• 公開（公告）號: CN112380134A
• 公開（公告）日: 2021-02-19
• 發(fā)明（設計）人: 曹劼;王全福;尹春光;吳曉兵
• 申請（專利權）人: 天翼電子商務有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06K9/62
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于圖像識別的WebUI自動化測試方法，其特征在于，主要包含圖像采集模塊，圖像匹配模塊，報告生成模塊，采用sikuli+selenium技術框架實現(xiàn)圖像采集模塊，應用opencv框架輔助實現(xiàn)圖像識別模塊，最后解析圖像匹配的結果，獲取差異元素的位置，最終生成測試報告，具體包括以下步驟：

S1.首先獲取標準模板圖像base.jpg，此模板將作為檢測界面異常的標準，而后進入圖像截取模塊，系統(tǒng)根據(jù)不同的配置參數(shù)，使用不同的瀏覽器，用戶可以腳本語言調(diào)用此模塊提供的api，從而控制界面的跳轉，將需要測試的界面截取并且保存；

S2.隨后進入圖像匹配模塊，由于瀏覽器兼容性測試，要求展示的界面與標準模板完全一致，因此可以設定匹配閾值為1，表示圖像嚴格匹配，模塊根據(jù)獲取的圖片，進一步清洗、加工特征，相似度計算，最終輸出匹配的結果及問題元素的位置信息；

S3.報告生成模塊解析匹配結果，生成測試結果報告，整個流程可以使用可以基于圖形化編程框架sikuli構建，因為其簡便性，可用戶直接使用截圖來進行UI自動化測試開發(fā)。