[發(fā)明專(zhuān)利]目標(biāo)應(yīng)用的操作錄制方法和裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201911215723.2
• 申請(qǐng)日: 2019-12-02
• 公開(kāi)（公告）號(hào): CN111124567B
• 公開(kāi)（公告）日: 2021-06-25
• 發(fā)明（設(shè)計(jì)）人: 張婧;高威;方李志
• 申請(qǐng)（專(zhuān)利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類(lèi)號(hào): G06F9/451
• 分類(lèi)號(hào): G06F9/451;G06F3/0488;G06F3/0484;G06F11/36;A63F13/60
• 代理公司: 北京康信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 周婷婷

本發(fā)明公開(kāi)了一種目標(biāo)應(yīng)用的操作錄制方法和裝置。其中，該方法包括：通過(guò)第二終端上的錄制客戶端上獲取第一終端上的目標(biāo)應(yīng)用的第一原始應(yīng)用畫(huà)面；在錄制客戶端上將第一原始應(yīng)用畫(huà)面縮小到第一目標(biāo)應(yīng)用畫(huà)面；在錄制客戶端上獲取對(duì)第一目標(biāo)應(yīng)用畫(huà)面中的第一目標(biāo)對(duì)象執(zhí)行的第一目標(biāo)觸控操作；在錄制客戶端上將第一目標(biāo)錄制信息記錄在錄制腳本中，第一目標(biāo)錄制信息包括第一目標(biāo)對(duì)象在第一目標(biāo)應(yīng)用畫(huà)面中的第一圖片、和第一目標(biāo)操作信息，第一目標(biāo)操作信息用于表示對(duì)第一目標(biāo)對(duì)象執(zhí)行的第一目標(biāo)觸控操作。本發(fā)明解決了現(xiàn)有技術(shù)中，目標(biāo)應(yīng)用的操作的單一性，導(dǎo)致在回放錄制目標(biāo)應(yīng)用的操作過(guò)程中出現(xiàn)的回放不精確的技術(shù)問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)領(lǐng)域，具體而言，涉及一種目標(biāo)應(yīng)用的操作錄制方法和裝置。

背景技術(shù)

現(xiàn)有關(guān)于Windows應(yīng)用的腳本錄制回放的技術(shù)主要是通過(guò)控件樹(shù)遍歷控件，或者圖像處理的方式找到目標(biāo)點(diǎn)，然后結(jié)合Windows鼠標(biāo)鍵盤(pán)事件實(shí)現(xiàn)具體操作。以UIAutomation為代表，都是通過(guò)控件樹(shù)的方式獲取應(yīng)用的布局，然后通過(guò)控件在控件樹(shù)中的路徑定位控件。后來(lái)隨著圖像技術(shù)的發(fā)展，出現(xiàn)了以SikuliX為代表的通過(guò)圖像定位控件的測(cè)試技術(shù)。

由于端游的實(shí)現(xiàn)方式和防外掛機(jī)制，端游客戶端無(wú)法像普通的PC應(yīng)用一樣，通過(guò)注入、hook等方式獲取應(yīng)用窗體結(jié)構(gòu)，因此，不能通過(guò)定位控件的方式實(shí)現(xiàn)自動(dòng)化；游戲?yàn)榱朔乐雇鈷煊绊懹螒虻墓叫院推胶庑裕瑫?huì)對(duì)游戲進(jìn)行安全防護(hù)，使得無(wú)法通過(guò)常用的方式在游戲內(nèi)調(diào)用鍵盤(pán)鼠標(biāo)事件，SikuliX就無(wú)法對(duì)某些進(jìn)行安全防護(hù)的游戲進(jìn)行腳本回放。

由于端游功能自動(dòng)化測(cè)試的腳本錄制方案比較少，兼容性以及使用率都不高。主要的困難包括以下幾點(diǎn)：(1)端游的防外掛機(jī)制使得一般的鍵盤(pán)、鼠標(biāo)在端游客戶端內(nèi)無(wú)法操作；(2)由于端游的防外掛機(jī)制，端游客戶端無(wú)法像普通的PC應(yīng)用一樣，通過(guò)注入、hook等方式獲取應(yīng)用窗體結(jié)構(gòu)，因此不能通過(guò)定位控件的方式實(shí)現(xiàn)自動(dòng)化；(3)各類(lèi)游戲的分辨率、電腦屏幕的分辨率有多種，圖像查找效果不好。

針對(duì)上述的問(wèn)題，目前尚未提出有效的解決方案。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供了一種目標(biāo)應(yīng)用的操作錄制方法和裝置，以至少解決現(xiàn)有技術(shù)中，目標(biāo)應(yīng)用的操作的單一性，導(dǎo)致在回放錄制目標(biāo)應(yīng)用的操作過(guò)程中出現(xiàn)的回放不精確的技術(shù)問(wèn)題。

根據(jù)本發(fā)明實(shí)施例的一個(gè)方面，提供了一種目標(biāo)應(yīng)用的操作錄制方法，包括：在錄制客戶端上獲取目標(biāo)應(yīng)用的第一原始應(yīng)用畫(huà)面，其中，所述目標(biāo)應(yīng)用運(yùn)行在第一終端上，所述錄制客戶端運(yùn)行在第二終端上，所述錄制客戶端與所述第一終端建立了連接；在所述錄制客戶端上將所述第一原始應(yīng)用畫(huà)面縮小到第一目標(biāo)應(yīng)用畫(huà)面，其中，所述第一目標(biāo)應(yīng)用畫(huà)面的尺寸為預(yù)定的目標(biāo)尺寸；在所述錄制客戶端上獲取對(duì)所述第一目標(biāo)應(yīng)用畫(huà)面中的第一目標(biāo)對(duì)象執(zhí)行的第一目標(biāo)觸控操作；在所述錄制客戶端上將第一目標(biāo)錄制信息記錄在錄制腳本中，其中，所述第一目標(biāo)錄制信息包括所述第一目標(biāo)對(duì)象在所述第一目標(biāo)應(yīng)用畫(huà)面中的第一圖片、和第一目標(biāo)操作信息，所述第一目標(biāo)操作信息用于表示對(duì)所述第一目標(biāo)對(duì)象執(zhí)行的所述第一目標(biāo)觸控操作。

根據(jù)本發(fā)明實(shí)施例的另一方面，還提供了一種目標(biāo)應(yīng)用的操作錄制裝置，包括：第一獲取單元，用于在錄制客戶端上獲取目標(biāo)應(yīng)用的第一原始應(yīng)用畫(huà)面，其中，所述目標(biāo)應(yīng)用運(yùn)行在第一終端上，所述錄制客戶端運(yùn)行在第二終端上，所述錄制客戶端與所述第一終端建立了連接；縮放單元，用于在所述錄制客戶端上將所述第一原始應(yīng)用畫(huà)面縮小到第一目標(biāo)應(yīng)用畫(huà)面，其中，所述第一目標(biāo)應(yīng)用畫(huà)面的尺寸為預(yù)定的目標(biāo)尺寸；第二獲取單元，用于在所述錄制客戶端上獲取對(duì)所述第一目標(biāo)應(yīng)用畫(huà)面中的第一目標(biāo)對(duì)象執(zhí)行的第一目標(biāo)觸控操作；錄制單元，用于在所述錄制客戶端上將第一目標(biāo)錄制信息記錄在錄制腳本中，其中，所述第一目標(biāo)錄制信息包括所述第一目標(biāo)對(duì)象在所述第一目標(biāo)應(yīng)用畫(huà)面中的第一圖片、和第一目標(biāo)操作信息，所述第一目標(biāo)操作信息用于表示對(duì)所述第一目標(biāo)對(duì)象執(zhí)行的所述第一目標(biāo)觸控操作。