[發(fā)明專利]圖形界面描述文件的生成方法及裝置

在審

• 申請?zhí)枺?/td>: 201810863629.7
• 申請日: 2018-08-01
• 公開（公告）號: CN109240687A
• 公開（公告）日: 2019-01-18
• 發(fā)明（設計）人: 賀三元;黃建鋒;張桀寧;錢毅;劉國良;錢鴻強
• 申請（專利權）人: 浙江口碑網(wǎng)絡技術有限公司
• 主分類號: G06F8/38
• 分類號: G06F8/38;G06F8/73;G06K9/20
• 代理公司: 北京市浩天知識產權代理事務所(普通合伙) 11276
• 代理人: 宋菲;劉云貴

1.一種圖形界面描述文件的生成方法，包括：

獲取與所述圖形界面相關的目標圖片；

對所述目標圖片進行圖像識別，確定所述目標圖片中包含的基礎控件，并獲取所述目標圖片中包含的各個基礎控件的屬性信息；

根據(jù)所述各個基礎控件的屬性信息，確定各個基礎控件之間的關聯(lián)關系；

依據(jù)所述各個基礎控件之間的關聯(lián)關系以及所述各個基礎控件的屬性信息，生成與所述目標圖片對應的界面描述文件。

2.根據(jù)權利要求1所述的方法，其中，所述基礎控件包括文本控件和/或非文本控件；

則所述對所述目標圖片進行圖像識別，確定所述目標圖片中包含的基礎控件進一步包括：

根據(jù)基礎控件類型，采用相應的圖像識別方法對所述目標圖片進行圖像識別，確定所述目標圖片中包含的基礎控件。

3.根據(jù)權利要求2所述的方法，其中，所述根據(jù)基礎控件類型，采用相應的圖像識別方法對所述目標圖片進行圖像識別，確定所述目標圖片中包含的基礎控件進一步包括：

對所述目標圖片進行OCR識別，確定所述目標圖片中包含的文本控件。

4.根據(jù)權利要求2或3所述的方法，其中，所述根據(jù)基礎控件類型，采用相應的圖像識別方法對所述目標圖片進行圖像識別，確定所述目標圖片中包含的基礎控件進一步包括：

對所述目標圖片進行輪廓提取，確定所述目標圖片中包含的非文本控件。

5.根據(jù)權利要求4所述的方法，其中，所述對所述目標圖片進行輪廓提取，確定所述目標圖片中包含的非文本控件進一步包括：

將所述目標圖片轉換為與所述目標圖片對應的灰度圖；

對所述灰度圖進行邊緣檢測，確定所述目標圖片中包含的非文本控件。

6.根據(jù)權利要求4或5所述的方法，其中，所述對所述目標圖片進行輪廓提取，確定所述目標圖片中包含的非文本控件進一步包括：

對所述目標圖片進行輪廓提取，確定所述目標圖片中包含的非文本候選控件；

對所述非文本候選控件進行過濾，過濾掉所述非文本候選控件中包含的非文本冗余控件，獲得所述目標圖片中包含的非文本控件。

7.根據(jù)權利要求6所述的方法，其中，所述對所述非文本候選控件進行過濾，過濾掉所述非文本候選控件中包含的非文本冗余控件，獲得所述目標圖片中包含的非文本控件進一步包括：

獲取并根據(jù)所述非文本候選控件的顏色直方圖，過濾掉所述非文本候選控件中包含的非文本冗余控件；

和/或，獲取并根據(jù)所述非文本候選控件的外接矩形，以及對所述目標圖片進行OCR識別后獲得的文本控件的區(qū)域，過濾掉所述非文本候選控件中包含的非文本冗余控件。

8.一種圖形界面描述文件的生成裝置，包括：

圖片獲取模塊，適于獲取與所述圖形界面相關的目標圖片；

控件確定模塊，適于對所述目標圖片進行圖像識別，確定所述目標圖片中包含的基礎控件；

屬性獲取模塊，適于獲取所述目標圖片中包含的各個基礎控件的屬性信息；

關系確定模塊，適于根據(jù)所述各個基礎控件的屬性信息，確定各個基礎控件之間的關聯(lián)關系；

生成模塊，適于依據(jù)所述各個基礎控件之間的關聯(lián)關系以及所述各個基礎控件的屬性信息，生成與所述目標圖片對應的界面描述文件。

9.一種計算設備，包括：處理器、存儲器、通信接口和通信總線，所述處理器、所述存儲器和所述通信接口通過所述通信總線完成相互間的通信；

所述存儲器用于存放至少一可執(zhí)行指令，所述可執(zhí)行指令使所述處理器執(zhí)行如權利要求1-7中任一項所述的圖形界面描述文件的生成方法對應的操作。

10.一種計算機存儲介質，所述存儲介質中存儲有至少一可執(zhí)行指令，所述可執(zhí)行指令使處理器執(zhí)行如權利要求1-7中任一項所述的圖形界面描述文件的生成方法對應的操作。