[發明專利]一種摘要評價方法及裝置

在審

• 申請號: 202010697992.3
• 申請日: 2020-07-20
• 公開（公告）號: CN111930931A
• 公開（公告）日: 2020-11-13
• 發明（設計）人: 蔡曉東;蔣鵬
• 申請（專利權）人: 桂林電子科技大學
• 主分類號: G06F16/34
• 分類號: G06F16/34;G06F40/211;G06F40/289;G06F40/30
• 代理公司: 北京輕創知識產權代理有限公司 11212
• 代理人: 尉保芳

本發明提供一種摘要評價方法及裝置，方法包括：錄入摘要信息和原文信息，將摘要信息和原文信息作為待評價語句信息；將所述待評價語句信息輸入預先構建的語義相似模型中的語義相似度處理得到語義相似度得分；對所述待評價語句信息的評價得分處理得到ROUGE得分；根據語義相似度得分對ROUGE得分的最優融合分析得到最優融合組；對最優融合組的融合分數計算得到最優融合分數，并通過最優融合分數得到摘要評價分數。本發明實現了既計算了待評價語句的共現信息又計算了待評價語句的深層語義信息，提高了對摘要的客觀評分能力，也避免評價分數受參考摘要主觀性的影響。

技術領域

本發明主要涉及語言處理技術領域，具體涉及一種摘要評價方法及裝置。

背景技術

在自然語言處理中，文本摘要是該領域中的熱點研究方向，文本摘要包括抽取式和生成式摘要，抽取式摘要通過抽取算法在原文中抽取重要的語句組成摘要，而生成式摘要則通過大量的預料來訓練模型使得模型具有生成摘要的能力。

近年來摘要已經取得了不錯的發展，但摘要的評價標準卻發展緩慢，摘要的評價標準包括內部評價和外部評價，外部評價是利用提取的摘要參與一些任務例如文檔檢索等進而判斷摘要的優劣；而內部評價是判斷系統摘要與參考摘要之間的信息重合度判斷摘要的質量。例如ROUGE評價和BLUE評價都是內部評價，這種評價方法的優點是穩定性和健壯性，但這種評價方法的缺點是未考慮到待評價語句的深層語義，當待評價句子之間的共現信息較少時而句子內部的深層語義相同時，這種評價方法不合理。

發明內容

本發明所要解決的技術問題是針對現有技術的不足，提供一種摘要評價方法及裝置。

本發明解決上述技術問題的技術方案如下：一種摘要評價方法，包括如下步驟：

錄入摘要信息和原文信息，將所述摘要信息和原文信息作為待評價語句信息；

將所述待評價語句信息輸入預先構建的語義相似模型中進行語義相似度處理，得到語義相似度得分；

對所述待評價語句信息進行評價得分處理，得到ROUGE得分；

根據所述語義相似度得分對所述ROUGE得分進行最優融合分析，得到最優融合組；

對所述最優融合組進行融合分數計算，得到最優融合分數，并通過所述最優融合分數得到摘要評價分數。

本發明解決上述技術問題的另一技術方案如下：一種摘要評價裝置，包括：

語句信息獲得模塊，用于錄入摘要信息和原文信息，將所述摘要信息和原文信息作為待評價語句信息；

語義相似處理模塊，用于將所述待評價語句信息輸入預先構建的語義相似模型中進行語義相似度處理，得到語義相似度得分；

ROUGE得分處理模塊，用于對所述待評價語句信息進行評價得分處理，得到ROUGE得分；

最優融合分析模塊，用于根據所述語義相似度得分對所述ROUGE得分進行最優融合分析，得到最優融合組；

摘要評價分數獲得模塊，用于對所述最優融合組進行融合分數計算，得到最優融合分數，并通過所述最優融合分數得到摘要評價分數。

本發明的有益效果是：通過將待評價語句信息輸入預先構建的語義相似模型中的語義相似度處理得到語義相似度得分，并對待評價語句信息的評價得分處理得到ROUGE得分，根據語義相似度得分對ROUGE得分的最優融合分析得到最優融合組，對最優融合組的融合分數計算得到最優融合分數，并通過最優融合分數得到摘要評價分數，實現了既計算了待評價語句的共現信息又計算了待評價語句的深層語義信息，提高了對摘要的客觀評分能力，也避免評價分數受參考摘要主觀性的影響。

附圖說明

圖1為本發明一實施例提供的摘要評價方法的流程示意圖；