[發明專利]數據處理方法、裝置、電子設備及介質

有效

• 申請號: 202010762084.8
• 申請日: 2020-07-31
• 公開（公告）號: CN111857719B
• 公開（公告）日: 2023-05-30
• 發明（設計）人: 蔡天勤;張釗;丁光磊
• 申請（專利權）人: 抖音視界有限公司
• 主分類號: G06F8/38
• 分類號: G06F8/38;G06F9/451;G06F11/36
• 代理公司: 北京風雅頌專利代理有限公司 11403
• 代理人: 徐雅琴

1.一種數據處理方法，其特征在于，包括：

獲取樣本應用程序的頁面文本信息，所述頁面文本信息包括頁面布局描述信息和對應的頁面動作操作信息；

根據所述樣本應用程序的頁面文本信息，解析生成所述樣本應用程序的連續的多個頁面各自的控件布局信息和對應的動作位置信息，作為訓練樣本，所述訓練樣本用于訓練測試模型，所述測試模型用于針對待測應用程序進行自動化測試；其中，根據所述樣本應用程序的頁面布局描述信息，提取頁面的控件作為頁面的通道信息，基于所述頁面的通道信息生成頁面的控件布局信息；所述控件包括文本類控件、圖像類控件、其他可視類控件、布局類控件、幀類控件以及按鈕類控件中的至少一種；任一所述頁面的動作位置信息根據該頁面的頁面動作操作信息提取得到。

2.根據權利要求1所述的方法，其特征在于，所述根據所述樣本應用程序的頁面文本信息，解析生成所述樣本應用程序的連續的多個頁面各自的控件布局信息和對應的動作位置信息，作為訓練樣本，包括：

根據所述樣本應用程序的頁面布局描述信息，提取頁面的文本類控件、圖片類控件以及其他可視類控件作為頁面的三通道信息，基于所述頁面的三通道信息生成頁面的控件布局信息；

根據所述樣本應用程序的頁面動作操作信息，提取針對頁面的動作位置信息；

將單個頁面的控件布局信息和對應的動作位置信息整合，生成單個頁面的控件布局及動作位置圖；

將連續的多個頁面的控件布局及動作位置圖，作為訓練樣本。

3.根據權利要求2所述的方法，其特征在于，所述根據所述樣本應用程序的頁面布局描述信息，提取頁面的文本類控件、圖片類控件以及其他可視類控件作為頁面的三通道信息，基于所述頁面的三通道信息生成頁面的控件布局信息，包括：

按照預設的分辨率繪制空白圖片；

采用樹的后序遍歷算法對所述頁面布局描述信息中的控件進行遍歷，提取頁面的文本類控件、圖片類控件以及其他可視類控件作為頁面的三通道信息，所述頁面的三通道信息包括葉節點對應的控件和/或非葉節點對應的控件；

將所述頁面的三通道信息，按照所述預設的分辨率填入所述空白圖片得到頁面的控件布局信息；

對應地，所述將單個頁面的控件布局信息和對應的動作位置信息整合，生成單個頁面的控件布局及動作位置圖，包括：

針對單個頁面，在頁面的控件布局信息中標注出頁面對應的動作位置信息，得到單個頁面的控件布局及動作位置圖。

4.根據權利要求3所述的方法，其特征在于，當所述頁面的三通道信息中的至少一類控件存在控件重疊時，所述將所述頁面的三通道信息，按照所述預設的分辨率填入所述空白圖片得到頁面的控件布局信息，包括：

分別確定文本類控件、圖片類控件以及其他可視類控件各自對應的最大重疊數量；

根據文本類控件、圖片類控件以及其他可視類控件各自對應的最大重疊數量，確定各自對應的顏色信息；

將所述頁面的三通道信息，按照各自對應的顏色信息和所述預設的分辨率填入所述空白圖片得到頁面的控件布局信息。

5.根據權利要求2所述的方法，其特征在于，所述將連續的多個頁面的控件布局及動作位置圖，作為訓練樣本，包括：

將連續的四個頁面的控件布局及動作位置圖作為訓練樣本。

6.根據權利要求1所述的方法，其特征在于，所述獲取樣本應用程序的頁面文本信息，包括：

獲取樣本應用程序的可擴展標記語言類XML的文本信息或者JS對象簡譜Json類的文本信息，作為頁面文本信息。

7.根據權利要求1-6任一項所述的方法，其特征在于，所述方法還包括：

獲取待測應用程序中連續的四個頁面的控件布局信息以及前三個頁面的動作位置信息，作為所述測試模型的輸入信息；

通過所述測試模型基于所述輸入信息，預測得到針對所述四個頁面中最后一個頁面的動作位置預測信息；

基于所述動作位置預測信息，控制針對所述待測應用程序的測試。