[發明專利]一種問答語料評估方法、裝置、計算機設備及存儲介質

有效

• 申請號: 202210559547.X
• 申請日: 2022-05-23
• 公開（公告）號: CN114647733B
• 公開（公告）日: 2022-09-13
• 發明（設計）人: 林曉琳
• 申請（專利權）人: 中國平安財產保險股份有限公司
• 主分類號: G06F16/35
• 分類號: G06F16/35;G06F16/951;G06F40/126;G06F40/205;G06F40/279;G06K9/62
• 代理公司: 深圳市世聯合知識產權代理有限公司 44385
• 代理人: 劉暢

1.一種問答語料評估方法，其特征在于，包括：

接收語料評估指令，獲取待評估語料和示例語料；

對所述待評估語料進行文本實體抽取，得到第一實體，以及對所述示例語料進行文本實體抽取，得到第二實體；

計算所述第一實體和所述第二實體的相似度，得到第一相似度；

對所述待評估語料中的所述第一實體進行標記，以及對所述示例語料中的所述第二實體進行標記；

利用預訓練的關系抽取模型對標記后的所述待評估語料進行關系抽取，得到第一實體關系，以及利用預訓練的關系抽取模型對標記后的所述示例語料進行關系抽取，得到第二實體關系；

計算所述第一實體關系和所述第二實體關系的相似度，得到第二相似度；

基于所述第一相似度和所述第二相似度對所述待評估語料進行評估，得到所述待評估語料的最終評估結果；

所述基于所述第一相似度和所述第二相似度對所述待評估語料進行評估，得到所述待評估語料的最終評估結果的步驟，具體包括：

比對所述第一相似度和預設第一閾值，得到第一比對結果；

比對所述第二相似度和預設第二閾值，得到第二比對結果；

基于所述第一比對結果和所述第二比對結果評估所述待評估語料，得到所述最終評估結果；

所述待評估語料的最終評估結果包括優質語料和無效語料，所述基于所述第一比對結果和所述第二比對結果評估所述待評估語料，得到所述最終評估結果，具體包括：

當所述第一相似度大于所述第一閾值但所述第二相似度小于所述第二閾值時，判定所述待評估語料為無效語料；

當所述第一相似度大于所述第一閾值且所述第二相似度也大于所述第二閾值時，判定待評估語料為優質語料。

2.如權利要求1所述的問答語料評估方法，其特征在于，所述對所述待評估語料中的所述第一實體進行標記，以及對所述示例語料中的所述第二實體進行標記的步驟，具體包括：

對所述待評估語料中的所述第一實體進行位置標記，得到第一實體位置信息，以及對所述示例語料中的所述第二實體進行位置標記，得到第二實體位置信息。

3.如權利要求2所述的問答語料評估方法，其特征在于，所述對所述待評估語料中的所述第一實體進行位置標記，得到第一實體位置信息，以及對所述示例語料中的所述第二實體進行位置標記，得到第二實體位置信息的步驟，具體包括：

識別所述第一實體在所述待評估語料中的位置，以及識別所述第二實體在所述示例語料中的位置，其中，所述位置包括起始位置和結束位置；

在所述起始位置插入起始標記符，以及在所述結束位置插入結束標記符；

利用所述起始標記符與所述結束標記符在所述待評估語料中標記所述第一實體，得到所述第一實體位置信息；

以及利用所述起始標記符與所述結束標記符在所述示例語料中標記所述第二實體，得到所述第二實體位置信息。

4.如權利要求2所述的問答語料評估方法，其特征在于，所述利用預訓練的關系抽取模型對標記后的所述待評估語料進行關系抽取，得到第一實體關系，以及利用預訓練的關系抽取模型對標記后的所述示例語料進行關系抽取，得到第二實體關系的步驟，具體包括：

對所述第一實體進行編碼，得到第一實體編碼向量，以及對所述第二實體進行編碼，得到第二實體編碼向量；

對所述第一實體位置信息進行編碼，得到第一位置編碼向量，以及對所述第二實體位置信息進行編碼，得到第二位置編碼向量；

對所述第一實體編碼向量和所述第一位置編碼向量進行拼接，得到第一拼接向量，以及對所述第二實體編碼向量和所述第二位置編碼向量進行拼接，得到第二拼接向量；

對所述第一拼接向量進行關系抽取，得到第一實體關系，以及對所述第二拼接向量進行關系抽取，得到第二實體關系。