[發(fā)明專利]克服像素點(diǎn)定位限制的系統(tǒng)、方法、裝置及可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010415147.2
• 申請日: 2020-05-15
• 公開（公告）號: CN111638879A
• 公開（公告）日: 2020-09-08
• 發(fā)明（設(shè)計(jì)）人: 李振;張剛;鮑東岳;尹正;馬圣楠;李千惠;劉昊霖;陳金鵬;李霞;杜昭慧
• 申請（專利權(quán)）人: 民生科技有限責(zé)任公司
• 主分類號: G06F8/38
• 分類號: G06F8/38;G06K9/34
• 代理公司: 北京金智普華知識產(chǎn)權(quán)代理有限公司 11401
• 代理人: 巴曉艷

本發(fā)明提供了一種克服像素點(diǎn)定位限制的系統(tǒng)、方法、裝置及可讀存儲介質(zhì)，本發(fā)明以O(shè)CR技術(shù)與相對位置適配技術(shù)為核心，來解決RPA機(jī)器人在C/S端配置時(shí)元素定位的問題。可以在PRA機(jī)器人C/S端應(yīng)用的初次配置上，大大降低配置時(shí)間，從而提升了開發(fā)效率。并且避免了因?yàn)橄袼刈兓鴮?dǎo)致的功能失效問題。

【技術(shù)領(lǐng)域】

本發(fā)明涉及計(jì)算機(jī)文字處理技術(shù)領(lǐng)域，尤其涉及一種基于RPA本地客戶端設(shè)置的，克服像素點(diǎn)定位限制的系統(tǒng)、方法、裝置及可讀存儲介質(zhì)。

【背景技術(shù)】

目前的RPA技術(shù)，在B/S端可以通過頁面元素標(biāo)簽完成定位問題，然而對于C/S端，普遍上對于精確位置定位只能選擇捕捉像素點(diǎn)的方式進(jìn)行定位。而通過像素點(diǎn)定位位置存在諸多的問題，例如在測試端的屏幕像素與生產(chǎn)端的屏幕像素不一致，那么這個(gè)不一致的問題就會(huì)導(dǎo)致RPA的定位偏離，喪失設(shè)計(jì)好的功能。如果客戶更換了顯示器，同樣會(huì)產(chǎn)生像素變化的問題，那么此前所設(shè)計(jì)的功能均會(huì)因此產(chǎn)生很大的負(fù)面影響。此外，在通過像素點(diǎn)位置進(jìn)行RPA初期功能配置的時(shí)候，也會(huì)非常的繁瑣，需要保證每一次的位置是準(zhǔn)確的，并且需要頻繁的在各個(gè)位置進(jìn)行點(diǎn)擊，大大降低了配置效率。因此，就目前市場上的RPA產(chǎn)品，在C/S端的RPA初次配置時(shí)，對個(gè)人用戶或是開發(fā)者來講，都會(huì)遇到配置效率低下的問題。

因此，有必要研究一種克服像素點(diǎn)定位限制的系統(tǒng)、方法、裝置及可讀存儲介質(zhì)來應(yīng)對現(xiàn)有技術(shù)的不足，以解決或減輕上述一個(gè)或多個(gè)問題。

【發(fā)明內(nèi)容】

有鑒于此，本發(fā)明提供了一種克服像素點(diǎn)定位限制的系統(tǒng)、方法、裝置及可讀存儲介質(zhì)，本發(fā)明以O(shè)CR技術(shù)與相對位置適配技術(shù)為核心，來解決RPA機(jī)器人在C/S端配置時(shí)元素定位的問題。可以在PRA機(jī)器人C/S端應(yīng)用的初次配置上，大大降低配置時(shí)間，從而提升了開發(fā)效率。并且避免了因?yàn)橄袼刈兓鴮?dǎo)致的功能失效問題。

一方面，本發(fā)明提供一種克服像素點(diǎn)定位限制系統(tǒng)，所述系統(tǒng)基于RPA本地客戶端設(shè)置，所述系統(tǒng)包括：

圖像信息獲取模塊，用于獲得目標(biāo)操作界面的截圖和屏幕分辨率；

標(biāo)注框處理模塊，用于對目標(biāo)操作界面中需要操作的目標(biāo)進(jìn)行框選標(biāo)注；

編號處理模塊，對框選標(biāo)注對象生成唯一順序的id編號；

標(biāo)記處理模塊，通過對截圖中標(biāo)注框進(jìn)行識別，并在標(biāo)注框的中心點(diǎn)處生成標(biāo)記點(diǎn)；

坐標(biāo)處理模塊，對標(biāo)注框和標(biāo)記點(diǎn)進(jìn)行相對坐標(biāo)計(jì)算，并根據(jù)屏幕分辨率進(jìn)行適應(yīng)性縮放；

RPA配置模塊，用于對RPA機(jī)器人的C/S端進(jìn)行配置。

如上所述的方面和任一可能的實(shí)現(xiàn)方式，進(jìn)一步提供一種克服像素點(diǎn)定位限制的方法，所述方法包括以下步驟：

S1：通過截屏和數(shù)據(jù)讀取，獲得目標(biāo)操作界面的圖像信息；

S2：在圖像信息中對目標(biāo)元素進(jìn)行標(biāo)注框處理；

S3：對標(biāo)注框進(jìn)行編號處理；

S4：對標(biāo)注框進(jìn)行圖像識別并進(jìn)行標(biāo)記處理；

S5：對標(biāo)記處理的標(biāo)注框進(jìn)行相對坐標(biāo)計(jì)算；

S6：根據(jù)S1中的圖像信息進(jìn)行相對坐標(biāo)縮放；

S7：對RPA機(jī)器人的C/S端進(jìn)行配置。

如上所述的方面和任一可能的實(shí)現(xiàn)方式，進(jìn)一步提供一種實(shí)現(xiàn)方式，所述S1中截屏獲得目標(biāo)操作界面的圖像信息為截圖。

如上所述的方面和任一可能的實(shí)現(xiàn)方式，進(jìn)一步提供一種實(shí)現(xiàn)方式，所述S1中數(shù)據(jù)讀取獲得目標(biāo)操作界面的圖像信息為目標(biāo)操作界面的屏幕分辨率。