[發明專利]題目識別方法、裝置、電子設備及計算機存儲介質

在審

• 申請號: 202110235866.0
• 申請日: 2021-03-03
• 公開（公告）號: CN112598000A
• 公開（公告）日: 2021-04-02
• 發明（設計）人: 秦勇;楊家博
• 申請（專利權）人: 北京世紀好未來教育科技有限公司
• 主分類號: G06K9/32
• 分類號: G06K9/32;G06K9/62
• 代理公司: 北京合智同創知識產權代理有限公司 11545
• 代理人: 李杰

本申請實施例提供了一種題目識別方法、裝置、電子設備及計算機存儲介質，該題目識別方法包括：獲取包含題目的目標圖像；將目標圖像輸入預先訓練完成的檢測模型，得到題目的題目區域和題目中的文本區域；通過預先訓練完成的編碼器模型，對題目區域的圖像部分進行編碼，獲得題目的編碼向量，相較于利用題目類型識別模型對題目類型進行識別的方案，基于編碼向量與預存的多種題目類型特征向量的匹配結果，獲得題目的題目類型信息，提高了題目類型信息的準確性；基于題目中的文本區域進行文本識別，得到文本識別結果；根據題目類型信息和文本識別結果，進行題目構建，獲得與目標圖像中的題目對應的構建題目，提高了識別效率、降低了識別成本。

技術領域

本申請實施例涉及計算機技術領域，尤其涉及一種題目識別方法、裝置、電子設備及計算機存儲介質。

背景技術

隨著在線教育的快速發展，眾多教學輔助類產品應運而生。在教學過程中，上述產品可以為老師提供技術支持，減輕老師的工作量，例如：可以實現題目的自動批改、題目搜索等。通過對包含題目的圖像進行題目識別，是實現題目批改、題目講解等的基礎。

現有技術中在對題目進行題目識別時，利用題目類型識別模型對圖像中題目的題型進行區分，將與題型對應的題目用文本框框起來，從而確定題目的題型，然后結合橫向文本行檢測結果對文本框進行合并，以對題目中的題目內容進行后續處理。

然而，在根據題目類型識別模型對題目類型進行識別的方案中，當圖像中出現新的題目類型時，需要重新收集新的題目類型相關的訓練樣本，同時還需要對這些訓練樣本進行標注，對題目類型識別模型進行重新訓練，題目識別效率低下且成本較高。

發明內容

有鑒于此，本申請實施例提供一種題目識別方法、裝置、電子設備及計算機存儲介質，用以克服現有技術中存在的題目識別效率低且成本高的缺陷。

第一方面，本申請實施例提供了一種題目識別方法，所述方法包括：獲取包含題目的目標圖像；將所述目標圖像輸入預先訓練完成的檢測模型，得到所述題目的題目區域和所述題目中的文本區域；通過預先訓練完成的編碼器模型，對所述題目區域的圖像部分進行編碼，獲得所述題目的編碼向量，基于所述編碼向量與預存的多種題目類型特征向量的匹配結果，獲得所述題目的題目類型信息；基于所述題目中的文本區域進行文本識別，得到文本識別結果；根據所述題目類型信息、所述文本識別結果，進行題目構建，獲得與所述目標圖像中的題目對應的構建題目。

第二方面，本申請實施例提供了一種題目識別裝置，所述裝置包括：獲取模塊，用于獲取包含題目的目標圖像；檢測模塊，用于將所述目標圖像輸入預先訓練完成的檢測模型，得到所述題目的題目區域和所述題目中的文本區域；匹配模塊，用于通過預先訓練完成的編碼器模型，對所述題目區域的圖像部分進行編碼，獲得所述題目的編碼向量，基于所述編碼向量與預存的多種題目類型特征向量的匹配結果，獲得所述題目的題目類型信息；識別模塊，用于基于所述題目中的文本區域進行文本識別，得到文本識別結果；構建模塊，用于根據所述題目類型信息、所述文本識別結果，進行題目構建，獲得與所述目標圖像中的題目對應的構建題目。

第三方面，本申請實施例提供了一種電子設備，包括：處理器、存儲器、通信接口和通信總線，所述處理器、所述存儲器和所述通信接口通過所述通信總線完成相互間的通信；所述存儲器用于存放至少一個可執行指令，所述可執行指令使所述處理器執行如第一方面或第一方面的任意一個實施例中所述的題目識別方法對應的操作。

第四方面，本申請實施例提供了一種計算機存儲介質，其上存儲有計算機程序，該程序被處理器執行時實現如第一方面或第一方面的任意一個實施例中所述的題目識別方法。