[發明專利]一種通用的界面元素自動探測系統

在審

• 申請號: 202110478702.0
• 申請日: 2021-04-30
• 公開（公告）號: CN113176922A
• 公開（公告）日: 2021-07-27
• 發明（設計）人: 劉春剛;李海強;孫名峰;陸晨
• 申請（專利權）人: 上海云擴信息科技有限公司
• 主分類號: G06F9/451
• 分類號: G06F9/451
• 代理公司: 北京盛凡智榮知識產權代理有限公司 11616
• 代理人: 徐佳慧

1.一種通用的界面元素自動探測系統，其特征在于：所述的通用的界面元素自動探測系統包含可擴展的元素選擇器schema、智能錄制器和元素探測器，Schema定義了一個樹形結構，智能錄制器是一個集成的元素錄制單元，智能錄制器是一個集成的元素錄制單元。

2.根據權利要求1所述的一種通用的界面元素自動探測系統，其特征在于：所述的元素選擇器schema第一層ApplicationMetaDataType包含應用當前進程相關信息，進程名ProcessName，進程運行參數Parameters，程序文件路徑FilePathChildControls包含目標元素各層級定位信息，包含窗口信息，父節點信息和自身信息。

3.根據權利要求1所述的一種通用的界面元素自動探測系統，其特征在于：所述的智能錄制器集成了UIA、MSAA、WEB、JAB多種錄制技術，根據進程信息，主窗口ClassName屬性信息智能選擇選擇合適的錄制技術，在錄制過程中，實時顯示當前屏幕相關信息，該錄制單元定義了一系列統一的接口，當需要新增錄制技術，只要實現了相關接口即可集成進去。

4.根據權利要求1所述的一種通用的界面元素自動探測系統，其特征在于：所述的元素探測器將識別到的元素轉為可保存、可傳輸的選擇器內容，元素探測器左側有一個進程樹面板，展示了系統桌面上可見與不可見的界面元素，每個元素支持右鍵生成對應的選擇器內容。

5.根據權利要求1所述的一種通用的界面元素自動探測系統，其特征在于：所述的智能錄制器工作時分為智能模式和手動模式，智能錄制時首先根據當前鼠標的坐標獲取到當前的進程信息，然后根據進程獲取適配該進程的錄制技術，繼而進入該錄制技術的相關實現方法，獲取到目標選擇器返回給客戶端；手動模式即需要指定當前的錄制技術，用戶通過快捷鍵F4進行切換錄制技術，然后直接調用該錄制技術對應的實現方法達到錄制效果。