[發明專利]一種應用軟件的自動測試方法和系統

在審

• 申請號: 201811459646.0
• 申請日: 2018-11-30
• 公開（公告）號: CN110058991A
• 公開（公告）日: 2019-07-26
• 發明（設計）人: 陳忻;張新琛;黃偉東;李佳楠;孫震
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 林祥

1.一種用于應用軟件的自動測試的方法，包括

接收表示測試目標和對應的測試動作的文本信息；

接收所述應用軟件的視圖圖像；

在所述視圖圖像中識別所述測試目標并確定所述測試目標在所述視圖圖像中的位置；以及

基于所述測試目標的所述位置對所述應用程序的所述測試目標調用由所述對應的測試動作所表示的測試操作。

2.根據權利要求1所述的方法，其中，通過如下方式之一接收表示所述測試目標和所述對應的測試動作的文本信息：

用戶輸入；或

從預先生成的列表中順序選擇。

3.根據權利要求1或2所述的方法，還包括

接收自然語言描述的文本信息，所述文本信息包括表示一個或多個測試目標和對應的測試動作的自然語言描述；

基于預定義的規則對所述文本信息中的所述自然語言描述進行解析以確定所述一個或多個測試目標和所述對應的測試動作；以及

生成包括所述一個或多個測試目標和所述對應的測試動作的列表。

4.根據權利要求1或2所述的方法，還包括

識別所述視圖圖像中各個元素的文本信息和位置信息；

其中，通過將每個元素的文本信息與表示所述測試目標的文本信息相比較來在所述視圖圖像中識別所述測試目標，并且通過確定與所述測試目標相對應的元素的位置信息來確定所述測試目標的所述位置。

5.根據權利要求4所述的方法，還包括

使用基于機器學習的文本檢測算法檢測所述視圖圖像中的字符；

基于檢測到的字符確定對應每個元素的文本區域；

將所述文本區域切割為表示每個字符的子區域；以及

使用基于機器學習的字符識別算法識別每個子區域中的字符從而識別所述視圖圖像中每個元素的文本信息。

6.根據權利要求5所述的方法，其中，所述基于機器學習的文本檢測算法包括CTPN，所述基于機器學習的字符識別算法包括CRNN。

7.一種用于應用軟件的自動測試的系統，包括

接收模塊，其被配置為接收表示測試目標和對應的測試動作的文本信息；

圖像識別模塊，其被配置為在所述應用軟件的視圖圖像中識別所述測試目標并確定所述測試目標在所述視圖圖像中的位置；以及

調用模塊，其被配置為基于所述測試目標的所述位置對所述應用程序的所述測試目標調用由所述對應的測試動作所表示的測試操作。

8.根據權利要求7所述的系統，其中，通過如下方式之一獲得表示所述測試目標和所述對應的測試動作的文本信息：

用戶輸入；或

從預先生成的列表中順序選擇。

9.根據權利要求7或8所述的系統，其中，所述接收模塊還被配置為接收自然語言描述的文本信息，所述文本信息包括表示一個或多個測試目標和對應的測試動作的自然語言描述；所述自動測試系統還包括：

解析模塊，其被配置為基于預定義的規則對所述文本信息中的所述自然語言描述進行解析以確定所述一個或多個測試目標和所述對應的測試動作；并且生成包括所述一個或多個測試目標和所述對應的測試動作的列表。

10.根據權利要求7或8所述的系統，其中，所述圖像識別模塊還被配置為識別所述視圖圖像中各個元素的文本信息和位置信息；其中，通過將每個元素的文本信息與表示所述測試目標的文本信息相比較來在所述視圖圖像中識別所述測試目標，并且通過確定與所述測試目標相對應的元素的位置信息來確定所述測試目標的所述位置。