[發明專利]評閱方法、評閱裝置、電子設備以及計算機可讀存儲介質

在審

• 申請號: 202111665520.0
• 申請日: 2021-12-31
• 公開（公告）號: CN114358579A
• 公開（公告）日: 2022-04-15
• 發明（設計）人: 陳子恒;沙晶;劉丹;王士進;魏思
• 申請（專利權）人: 科大訊飛股份有限公司
• 主分類號: G06Q10/06
• 分類號: G06Q10/06;G06Q10/04;G06Q50/20;G06N3/04;G06N3/08;G06K9/62;G06F40/289
• 代理公司: 深圳市威世博知識產權代理事務所(普通合伙) 44280
• 代理人: 劉希

1.一種評閱方法，其特征在于，包括：

獲取到待評分的數學文本；其中，所述數學文本包括標準答案以及用戶作答內容，所述數學文本包括數學式子和文字信息；其中，所述數學文本為經過分詞處理后的文本；

將所述數學文本輸入到評分預測模型中，利用所述評分預測模型對所述數學文本中的所述文字信息以及所述數學式子進行識別；其中，所述評分預測模型是利用不完整的數學文本進行訓練得到的；其中，所述不完整的數學文本包括被掩蓋的數學式子以及被掩蓋的文字信息；

基于識別結果對所述用戶作答內容進行評分并輸出得分率。

2.根據權利要求1所述的評閱方法，其特征在于，所述獲取到待評分的數學文本的步驟，具體包括：

獲取到多個所述待評分的數學文本；

所述將所述數學文本輸入到評分預測模型中，利用所述評分預測模型對所述數學文本中的所述文字信息以及所述數學式子進行識別的步驟，包括：

將各所述數學文本輸入所述評分預測模型中，利用所述評分預測模型對所述各所述數學文本中的所述文字信息以及所述數學式子進行識別，得到多個識別結果；

所述基于識別結果對所述用戶作答內容進行評分并輸出得分率的步驟，包括：

通過所述評分預測模型對多個全部識別結果進行評分，輸出多個得分率，并通過所述評分預測模型得到所述多個得分率的均值；

通過所述評分預測模型對所述多個得分率的均值以及各所述數學文本對應的得分率進行高斯分布擬合，并基于獲得的各方差與第二設定閾值的對比結果，判斷是否拒絕對各所述數學文本進行評閱；其中，響應于單個所述數學文本的所述方差大于所述第二設定閾值，拒絕對單個所述數學文本進行評分。

3.根據權利要求1或2任一項所述的評閱方法，其特征在于，所述利用不完整的數學文本進行訓練的方法，具體包括：

獲取到第一樣本數據集，各第一樣本數據為所述不完整的數學文本；

利用所述第一樣本數據集對預設語言模型進行數學式子以及文字預測訓練，得到第一模型；

獲取到第二樣本數據集，各第二樣本數據包括題目、標準答案、用戶作答內容以及所述用戶作答內容的評判信息；且所述第二樣本數據包括數學式子以及文字信息；

利用所述第二樣本數據集對所述第一模型進行評分訓練，得到所述評分預測模型。

4.根據權利要求3所述的評閱方法，其特征在于，所述獲取到第一樣本數據集，各第一樣本數據為所述不完整的數學文本的步驟，包括：

獲取到原始樣本集，其中，各原始樣本包括所述數學式子和所述文字信息；

對各原始樣本中的所述數學式子以及所述文字信息進行分詞處理，以將所述數學式子以及所述文字信息切分成多個分詞；

將所述數學式子對應的分詞以及所述文字信息對應的分詞進行部分掩蓋，得到所述第一樣本數據集。

5.根據權利要求4所述的評閱方法，其特征在于，所述利用所述第一樣本數據集對預設語言模型進行數學式子以及文字預測訓練，得到第一模型的步驟，包括：

對所述原始樣本中的所述數學式子進行構建，以生成公式解析樹；

對所述公式解析樹進行遍歷，得到所述公式解析樹的各個節點在所述原始樣本中的位置信息，并將所述公式解析樹以及對應的位置信息進行存儲；

利用所述第一樣本數據以及所述位置信息對所述預設語言模型進行數學式子以及文字預測訓練，得到所述第一模型。

6.根據權利要求5所述的評閱方法，其特征在于，所述利用所述第一樣本數據以及所述位置信息對所述預設語言模型進行數學式子以及文字預測訓練，得到所述第一模型的步驟，包括：

通過所述預設語言模型對所述第一樣本數據中所述被掩蓋的數學式子以及所述被掩蓋的文字信息進行內容以及位置的預測，得到第一預測信息；

利用所述第一預測信息、所述位置信息、以及各所述第一樣本數據對所述預設語言模型進行數學式子以及文字預測訓練，得到所述第一模型。