[發明專利]一種解決屏幕彈窗過快而無法捕捉的方法

有效

• 申請號: 201810332499.4
• 申請日: 2018-04-13
• 公開（公告）號: CN108600621B
• 公開（公告）日: 2020-10-20
• 發明（設計）人: 駱無意;聶鵬;鞏慶海;蔣彭龍;楊業;方煥輝
• 申請（專利權）人: 北京航天自動控制研究所;中國運載火箭技術研究院
• 主分類號: H04N5/232
• 分類號: H04N5/232;H04N5/76
• 代理公司: 中國航天科技專利中心 11009
• 代理人: 李晶堯

一種解決屏幕彈窗過快而無法捕捉的方法，涉及計算機視覺及工業自動化技術領域；包括如下步驟：步驟(一)、攝像頭實時對顯示屏幕拍照，并將照片儲存于控制主機；步驟(二)、控制主機對最后儲存的兩張圖片進行判斷，判斷圖片中是否有彈窗；步驟(三)、驅動執行機構執行按鈕操作，完成任務操作需求；步驟(四)、在彈窗按鈕操作結束瞬間，控制主機控制攝像頭對顯示屏幕拍照；步驟(五)、執行機構繼續進行按鈕操作，直至完成任務操作需求；本發明的目的在于克服現有技術的上述不足，提供一種解決屏幕彈窗過快而無法捕捉的方法，選擇系統子塊驅動的來實現這一背景操作，效果良好，能達到視覺系統始終捕捉到屏幕中的彈窗信息。

技術領域

本發明涉及一種計算機視覺及工業自動化技術領域，特別是解決屏幕彈窗過快而無法視頻捕捉的方法。

背景技術

在工程中遇見一技術性難題，在控制主機控制執行機構執行動作時，控制信息傳輸的屏幕彈窗指令一閃而過，無法正常捕捉，繼而控制主機無法再控制執行機構執行下一步操作。

現有技術中針對無法及時捕捉特征圖片的方式有很多，一種為使用高速攝像頭進行捕捉，但是本工程性問題不涉及此方式，本工程性問題是系統運行過程中無法調用攝像頭導致的。

另一種方式是采用并行計算的方式解決此類問題，也就是一邊拍攝圖片進行保存，一邊控制執行機構進行操作，但是此類方式無法確保計算的一致性，在系統運行過程中，執行機構是基于實時拍攝的圖片的信息做執行動作，當獨立拍攝圖片時，無法確定拍攝的那一段屬于所需的控制信息圖片。

還有一種方式是在執行機構執行動作完畢時調用攝像頭拍攝照片，以便解決無法視頻捕捉，但是此類工程中，在執行動作完畢時，執行動作的系統還在繼續運行，無法調用攝像頭。

發明內容

本發明的目的在于克服現有技術的上述不足，提供一種解決屏幕彈窗過快而無法捕捉的方法，將處理拍照系統的程序和處理執行機構的程序融合在一起，即執行動作完成后，無論執行動作是否完全完成，立即拍照取圖，這種方法效果良好，能達到視覺系統始終捕捉到屏幕中的彈窗信息。

本發明的上述目的是通過如下技術方案予以實現的：

一種解決屏幕彈窗過快而無法捕捉的方法，包括如下步驟：

步驟(一)、攝像頭實時對顯示屏幕拍照，并將照片儲存于控制主機；當控制主機中存儲的照片大于等于閾值張數時，進入步驟(二)；

步驟(二)、控制主機對最后儲存的兩張圖片進行判斷，判斷圖片中是否有彈窗；當有彈窗時，進入步驟(三)；當無彈窗時，進入步驟(一)；

步驟(三)、控制主機根據彈窗中的任務操作需求，發出控制指令，驅動執行機構執行按鈕操作，完成任務操作需求；

步驟(四)、在執行機構執行按鈕操作過程中，當對彈窗按鈕進行操作時，在彈窗按鈕操作結束瞬間，控制主機控制攝像頭對顯示屏幕拍照，并將拍攝照片存儲在控制主機中；

步驟(五)、執行機構繼續進行按鈕操作，直至完成任務操作需求；完成對本次任務操作的顯示屏幕拍照存儲記錄；當有其他彈窗彈出時，重復步驟(一)至步驟(五)。

在上述的一種解決屏幕彈窗過快而無法捕捉的方法，所述步驟(一)中，照片的像素為640*480。

在上述的一種解決屏幕彈窗過快而無法捕捉的方法，所述步驟(一)中，攝像頭的拍照頻率為每秒5-7張。

在上述的一種解決屏幕彈窗過快而無法捕捉的方法，所述步驟(一)中，閾值張數為2。

在上述的一種解決屏幕彈窗過快而無法捕捉的方法，所述步驟(四)中，所述按鈕包括測試板面上的按鈕和鍵盤上的按鈕；其中，鍵盤上的按鈕設定為彈窗按鈕。