[發(fā)明專利]一種基于機(jī)器學(xué)習(xí)的自動(dòng)化應(yīng)用程序界面測(cè)試方法和測(cè)試系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201710683982.2
• 申請(qǐng)日: 2017-08-11
• 公開（公告）號(hào): CN107608877B
• 公開（公告）日: 2021-04-09
• 發(fā)明（設(shè)計(jì)）人: 陳家林;黃宗緯;蔣鑫
• 申請(qǐng)（專利權(quán)）人: 上海巍擎信息技術(shù)有限責(zé)任公司
• 主分類號(hào): G06F11/36
• 分類號(hào): G06F11/36;G06N3/04;G06N3/08
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于機(jī)器學(xué)習(xí)的自動(dòng)化應(yīng)用程序界面測(cè)試方法，其特征在于，所述測(cè)試方法，包括：

當(dāng)判斷已獲取的待測(cè)試應(yīng)用程序的UI界面為初次出現(xiàn)時(shí)，將所述UI界面轉(zhuǎn)換為圖片；

將得到的圖片輸入到預(yù)設(shè)UI界面分類器，以獲取所述UI界面的類別，其中，所述UI界面分類器為基于生成對(duì)抗神經(jīng)網(wǎng)絡(luò)GAN與卷積神經(jīng)網(wǎng)絡(luò)CNN的UI界面分類器；

根據(jù)所述UI界面的類別從預(yù)設(shè)的測(cè)試大綱腳本庫(kù)中獲取對(duì)應(yīng)的測(cè)試大綱腳本；

將所述測(cè)試大綱腳本與所述UI界面的布局進(jìn)行適配，獲取所述UI界面對(duì)應(yīng)的測(cè)試腳本；

通過所述測(cè)試腳本對(duì)所述UI界面進(jìn)行測(cè)試。

2.如權(quán)利要求1所述的測(cè)試方法，其特征在于，判斷所述UI界面是否為初次出現(xiàn)的方法包括：計(jì)算所述UI界面的唯一識(shí)別值，如果所述唯一識(shí)別值為新的，則所述UI界面為初次出現(xiàn)。

3.如權(quán)利要求2所述的測(cè)試方法，其特征在于，生成預(yù)設(shè)UI界面分類器的方法包括：

獲取預(yù)設(shè)數(shù)量的應(yīng)用程序的UI界面，為各UI界面計(jì)算唯一識(shí)別值，并將各UI界面轉(zhuǎn)換為UI界面圖片；

將所有已搜集的UI界面圖片進(jìn)行類別標(biāo)記，組成原始數(shù)據(jù)集；

將原始數(shù)據(jù)集作為GAN算法的輸入，按預(yù)定義規(guī)則設(shè)置相應(yīng)的參數(shù)，生成一定數(shù)量的已標(biāo)記類別的UI界面圖片，與原始數(shù)據(jù)集合并后組成訓(xùn)練集；

將訓(xùn)練集作為CNN算法的輸入，按預(yù)定義規(guī)則設(shè)置相應(yīng)的參數(shù)，通過CNN算法輸出得到UI界面分類器。

4.如權(quán)利要求1所述的測(cè)試方法，其特征在于，將所述測(cè)試大綱腳本與所述UI界面的布局進(jìn)行適配的方法包括：根據(jù)UI控件順序、UI控件操作進(jìn)行適配。

5.如權(quán)利要求2所述的測(cè)試方法，其特征在于，將所述測(cè)試大綱腳本與所述UI界面的布局進(jìn)行適配，獲取所述UI界面對(duì)應(yīng)的測(cè)試腳本的步驟之后，所述測(cè)試方法還包括：

將所述唯一識(shí)別值與所述測(cè)試腳本進(jìn)行關(guān)聯(lián)。

6.一種基于機(jī)器學(xué)習(xí)的自動(dòng)化應(yīng)用程序界面測(cè)試系統(tǒng)，其特征在于，所述測(cè)試系統(tǒng)，包括判斷單元、UI界面類別獲取單元、測(cè)試大綱腳本獲取單元、測(cè)試腳本獲取單元及測(cè)試單元，其中：

所述判斷單元，用于當(dāng)判斷已獲取的待測(cè)試應(yīng)用程序的UI界面為初次出現(xiàn)時(shí)，將所述UI界面轉(zhuǎn)換為圖片；

所述UI界面類別獲取單元，用于將得到的圖片輸入到預(yù)設(shè)UI界面分類器，以獲取所述UI界面的類別，其中，所述UI界面分類器為基于生成對(duì)抗神經(jīng)網(wǎng)絡(luò)GAN與卷積神經(jīng)網(wǎng)絡(luò)CNN的UI界面分類器；

所述測(cè)試大綱腳本獲取單元，用于根據(jù)所述UI界面的類別從預(yù)設(shè)的測(cè)試大綱腳本庫(kù)中獲取對(duì)應(yīng)的測(cè)試大綱腳本；

所述測(cè)試腳本獲取單元，將所述測(cè)試大綱腳本與所述UI界面的布局進(jìn)行適配，獲取所述UI界面對(duì)應(yīng)的測(cè)試腳本；

所述測(cè)試單元，用于通過所述測(cè)試腳本對(duì)所述UI界面進(jìn)行測(cè)試。

7.如權(quán)利要求6所述的測(cè)試系統(tǒng)，其特征在于，所述判斷單元判斷UI界面是否為初次出現(xiàn)的方法包括：計(jì)算所述UI界面的唯一識(shí)別值，如果所述唯一識(shí)別值為新的，則所述UI界面為初次出現(xiàn)。

8.如權(quán)利要求7所述的測(cè)試系統(tǒng)，其特征在于，所述UI界面類別獲取單元生成預(yù)設(shè)UI界面分類器的方法包括：

獲取預(yù)設(shè)數(shù)量的應(yīng)用程序的UI界面，為各UI界面計(jì)算唯一識(shí)別值，并將各UI界面轉(zhuǎn)換為UI界面圖片；

將所有已搜集的UI界面圖片進(jìn)行類別標(biāo)記，組成原始數(shù)據(jù)集；

將原始數(shù)據(jù)集作為GAN算法的輸入，按預(yù)定義規(guī)則設(shè)置相應(yīng)的參數(shù)，生成一定數(shù)量的已標(biāo)記類別的UI界面圖片，與原始數(shù)據(jù)集合并后組成訓(xùn)練集；

將訓(xùn)練集作為CNN算法的輸入，按預(yù)定義規(guī)則設(shè)置相應(yīng)的參數(shù)，通過CNN算法輸出得到UI界面分類器。

9.如權(quán)利要求6所述的測(cè)試系統(tǒng)，其特征在于，所述測(cè)試腳本獲取單元將所述測(cè)試大綱腳本與所述UI界面的布局進(jìn)行適配的方法包括：根據(jù)UI控件順序、UI控件操作進(jìn)行適配。

10.如權(quán)利要求7所述的測(cè)試系統(tǒng)，其特征在于，所述測(cè)試腳本獲取單元還用于在將所述測(cè)試大綱腳本與所述UI界面的布局進(jìn)行適配，獲取所述UI界面對(duì)應(yīng)的測(cè)試腳本之后，將所述唯一識(shí)別值與所述測(cè)試腳本進(jìn)行關(guān)聯(lián)。