[發(fā)明專利]功能測(cè)試方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010467528.5
• 申請(qǐng)日: 2020-05-28
• 公開（公告）號(hào): CN113742199A
• 公開（公告）日: 2021-12-03
• 發(fā)明（設(shè)計(jì)）人: 劉子岳;王璐;王晨輝;周亮
• 申請(qǐng)（專利權(quán)）人: 北京達(dá)佳互聯(lián)信息技術(shù)有限公司
• 主分類號(hào): G06F11/36
• 分類號(hào): G06F11/36
• 代理公司: 北京博思佳知識(shí)產(chǎn)權(quán)代理有限公司 11415
• 代理人: 陳蕾

1.一種功能測(cè)試方法，其特征在于，所述方法包括：

響應(yīng)于應(yīng)用程序的功能測(cè)試需求，提取與所述功能測(cè)試需求對(duì)應(yīng)的待測(cè)功能的參數(shù)；

基于賬戶庫中賬戶的功能參數(shù)，從所述賬戶庫中確定出與所述待測(cè)功能的參數(shù)相匹配的候選賬戶，其中，所述賬戶庫中賬戶的功能參數(shù)是根據(jù)所述賬戶庫中賬戶的用戶標(biāo)識(shí)和用戶標(biāo)簽從多個(gè)功能參數(shù)中確定的；

根據(jù)確定出的候選賬戶生成實(shí)驗(yàn)樣本集合，其中，所述候選賬戶登錄的應(yīng)用程序中配置有所述待測(cè)功能；

記錄所述實(shí)驗(yàn)樣本集合和對(duì)照樣本集合的賬戶在使用應(yīng)用程序的過程中產(chǎn)生的行為數(shù)據(jù)，所述對(duì)照樣本集合中的各個(gè)賬戶登錄的應(yīng)用程序配置的待測(cè)功能區(qū)別于所述待測(cè)功能；

根據(jù)所述行為數(shù)據(jù)確定所述待測(cè)功能的測(cè)試結(jié)果。

2.根據(jù)權(quán)利要求1所述方法，其特征在于，在基于賬戶庫中賬戶的功能參數(shù)，從所述賬戶庫中確定出與所述待測(cè)功能的參數(shù)相匹配的候選賬戶之前，所述方法還包括：

使用訓(xùn)練完成的與多個(gè)待測(cè)功能分別對(duì)應(yīng)的功能推薦模型對(duì)賬戶庫中賬戶的用戶標(biāo)識(shí)和用戶標(biāo)簽進(jìn)行特征提取；

根據(jù)提取的特征確定所述多個(gè)待測(cè)功能中與所述賬戶相匹配的待測(cè)功能；

將所述待測(cè)功能的功能參數(shù)確定為所述賬戶的功能參數(shù)。

3.根據(jù)權(quán)利要求2所述方法，其特征在于，所述與多個(gè)待測(cè)功能分別對(duì)應(yīng)的功能推薦模型是根據(jù)作為訓(xùn)練樣本的用戶標(biāo)識(shí)和用戶標(biāo)簽預(yù)先訓(xùn)練完成的，所述方法還包括：

確定由包含用戶標(biāo)識(shí)和用戶標(biāo)簽的訓(xùn)練樣本構(gòu)成的模型探索樣本集合；

將所述模型探索樣本集合中的用戶標(biāo)識(shí)和用戶標(biāo)簽輸入功能推薦模型，其中，所述訓(xùn)練樣本中預(yù)先標(biāo)注有所述用戶標(biāo)識(shí)對(duì)應(yīng)的賬戶與所述功能推薦模型的實(shí)際匹配結(jié)果；

根據(jù)功能推薦模型確定的預(yù)測(cè)匹配結(jié)果與所述實(shí)際匹配結(jié)果的差異反向調(diào)整所述功能推薦模型的模型參數(shù)，以減小所述預(yù)測(cè)匹配結(jié)果與所述實(shí)際匹配結(jié)果的差異。

4.根據(jù)權(quán)利要求1所述方法，其特征在于，所述根據(jù)所述行為數(shù)據(jù)確定所述待測(cè)功能的測(cè)試結(jié)果，包括：

根據(jù)所述行為數(shù)據(jù)分別確定實(shí)驗(yàn)樣本集合和對(duì)照樣本集合對(duì)應(yīng)于預(yù)設(shè)評(píng)估指標(biāo)的實(shí)驗(yàn)組評(píng)估數(shù)據(jù)和對(duì)照組評(píng)估數(shù)據(jù)，所述預(yù)設(shè)評(píng)估指標(biāo)包括下述至少之一：在預(yù)設(shè)評(píng)估時(shí)長(zhǎng)內(nèi)產(chǎn)生行為數(shù)據(jù)的賬戶的數(shù)量、產(chǎn)生于預(yù)設(shè)評(píng)估時(shí)長(zhǎng)的行為數(shù)據(jù)的行為時(shí)長(zhǎng)總值；

基于所述實(shí)驗(yàn)組評(píng)估數(shù)據(jù)、所述對(duì)照組評(píng)估數(shù)據(jù)和預(yù)設(shè)的假設(shè)檢驗(yàn)算法確定賬戶所處的組別與預(yù)設(shè)評(píng)估指標(biāo)之間是否具有相關(guān)性，其中，所述預(yù)設(shè)的假設(shè)檢驗(yàn)算法對(duì)應(yīng)的假設(shè)為賬戶所處的組別與預(yù)設(shè)評(píng)估指標(biāo)有關(guān)；

在根據(jù)所述假設(shè)檢驗(yàn)算法的檢驗(yàn)結(jié)果確定賬戶所處的組別與預(yù)設(shè)評(píng)估指標(biāo)具有相關(guān)性的情況下，確定對(duì)所述實(shí)驗(yàn)樣本集合的功能配置方式通過測(cè)試檢驗(yàn)。

5.根據(jù)權(quán)利要求1所述方法，其特征在于，所述賬戶庫中賬戶的用戶標(biāo)簽是在與所述用戶標(biāo)識(shí)對(duì)應(yīng)的用戶屬性信息集合中根據(jù)預(yù)先指定的屬性類型所對(duì)應(yīng)的屬性信息而確定；或者，

所述賬戶庫中賬戶的用戶標(biāo)簽是根據(jù)預(yù)先訓(xùn)練得到的畫像提取模型對(duì)所述用戶標(biāo)識(shí)對(duì)應(yīng)的用戶屬性信息集合進(jìn)行特征提取，并根據(jù)提取的特征而確定的。

6.一種功能測(cè)試裝置，其特征在于，所述裝置包括：

參數(shù)提取模塊，被配置為執(zhí)行響應(yīng)于應(yīng)用程序的功能測(cè)試需求，提取與所述功能測(cè)試需求對(duì)應(yīng)的待測(cè)功能的參數(shù)；

候選賬戶確定模塊，被配置為執(zhí)行基于賬戶庫中賬戶的功能參數(shù)，從所述賬戶庫中確定出與所述待測(cè)功能的參數(shù)相匹配的候選賬戶，其中，所述賬戶庫中賬戶的功能參數(shù)是根據(jù)所述賬戶庫中賬戶的用戶標(biāo)識(shí)和用戶標(biāo)簽從多個(gè)功能參數(shù)中確定的；

實(shí)驗(yàn)樣本集合生成模塊，被配置為執(zhí)行根據(jù)確定出的候選賬戶生成實(shí)驗(yàn)樣本集合，其中，所述候選賬戶登錄的應(yīng)用程序中配置有所述待測(cè)功能；

行為數(shù)據(jù)記錄模塊，被配置為執(zhí)行記錄所述實(shí)驗(yàn)樣本集合和對(duì)照樣本集合的賬戶在使用應(yīng)用程序的過程中產(chǎn)生的行為數(shù)據(jù)，所述對(duì)照樣本集合中的各個(gè)賬戶登錄的應(yīng)用程序配置的待測(cè)功能區(qū)別于所述待測(cè)功能；

測(cè)試結(jié)果確定模塊，被配置為執(zhí)行根據(jù)所述行為數(shù)據(jù)確定所述待測(cè)功能的測(cè)試結(jié)果。