[發(fā)明專利]克服像素點定位限制的系統(tǒng)、方法、裝置及可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010415147.2
• 申請日: 2020-05-15
• 公開（公告）號: CN111638879A
• 公開（公告）日: 2020-09-08
• 發(fā)明（設計）人: 李振;張剛;鮑東岳;尹正;馬圣楠;李千惠;劉昊霖;陳金鵬;李霞;杜昭慧
• 申請（專利權(quán)）人: 民生科技有限責任公司
• 主分類號: G06F8/38
• 分類號: G06F8/38;G06K9/34
• 代理公司: 北京金智普華知識產(chǎn)權(quán)代理有限公司 11401
• 代理人: 巴曉艷

1.一種克服像素點定位限制系統(tǒng)，所述系統(tǒng)基于RPA本地客戶端設置，其特征在于，所述系統(tǒng)包括：

圖像信息獲取模塊，用于獲得目標操作界面的截圖和屏幕分辨率；

標注框處理模塊，用于對目標操作界面中需要操作的目標進行框選標注；

編號處理模塊，對框選標注對象生成唯一順序的id編號；

標記處理模塊，通過對截圖中標注框進行識別，并在標注框的中心點處生成標記點；

坐標處理模塊，對標注框和標記點進行相對坐標計算，并根據(jù)屏幕分辨率進行適應性縮放；

RPA配置模塊，用于對RPA機器人的C/S端進行配置。

2.一種克服像素點定位限制的方法，其特征在于，所述方法包括以下步驟：

S1：通過截屏和數(shù)據(jù)讀取，獲得目標操作界面的圖像信息；

S2：在圖像信息中對目標元素進行標注框處理；

S3：對標注框進行編號處理；

S4：對標注框進行圖像識別并進行標記處理；

S5：對標記處理的標注框進行相對坐標計算；

S6：根據(jù)S1中的圖像信息進行相對坐標縮放；

S7：對RPA機器人的C/S端進行配置。

3.根據(jù)權(quán)利要求2所述的克服像素點定位限制方法，其特征在于，所述S1中截屏獲得目標操作界面的圖像信息為截圖。

4.根據(jù)權(quán)利要求2所述的克服像素點定位限制方法，其特征在于，所述S1中數(shù)據(jù)讀取獲得目標操作界面的圖像信息為目標操作界面的屏幕分辨率。

5.根據(jù)權(quán)利要求2所述的克服像素點定位限制方法，其特征在于，所S2具體為將需要操作的目標進行框選標注。

6.根據(jù)權(quán)利要求2所述的克服像素點定位限制方法，其特征在于，所述S3具體為：根據(jù)框選標注對象的順序，生成唯一對應的順序id編號，所述id編號內(nèi)容應具有唯一性，不可重復，id編號包括1、2、3....、A、B、C....和Ⅰ、Ⅱ、....。

7.根據(jù)權(quán)利要求2所述的克服像素點定位限制方法，其特征在于，所述S4具體為：通過OCR圖像識別技術(shù)對截圖中標注框進行識別，并在標注框的中心點處生成標記點。

8.根據(jù)權(quán)利要求2所述的克服像素點定位限制方法，其特征在于，所述S7具體為：同步使用者屏幕分辨率后，將標記點相對坐標縮放為使用者實際分辨率的實際坐標，之后對RPA機器人的C/S端進行配置。

9.一種克服像素點定位限制裝置，其特征在于，所述裝置包括存儲器、處理器以及存儲在所述存儲器上并可在所述處理器上運行的克服像素點定位限制的處理程序，所述克服像素點定位限制的處理程序被所述處理器執(zhí)行時實現(xiàn)如權(quán)利要求2至8中任一項所述的克服像素點定位限制方法的步驟。

10.一種計算機可讀存儲介質(zhì)，其特征在于，所述計算機可讀存儲介質(zhì)上存儲有克服像素點定位限制的處理程序，所述克服像素點定位限制的處理程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求2至8中任一項所述的克服像素點定位限制方法的步驟。