[發明專利]應答方法、裝置、電子設備及存儲介質

在審

• 申請號: 202310211897.1
• 申請日: 2023-02-28
• 公開（公告）號: CN116204624A
• 公開（公告）日: 2023-06-02
• 發明（設計）人: 張學文;李睿
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F18/22;G06F18/25
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 莊錦軍

1.一種應答方法，包括：

響應于檢測到輸入信息包括至少兩個數據類別的至少兩個子信息，確定所述至少兩個子信息的多模態特征；

根據所述多模態特征，從問題庫中確定第一候選問題集；

確定所述至少兩個子信息中的每個子信息對應的第二候選問題集；

根據所述第一候選問題集和與所述每個子信息對應的第二候選問題集，確定目標問題；以及

基于所述目標問題確定針對所述輸入信息的答案。

2.根據權利要求1所述的方法，其中，所述根據所述多模態特征，從問題庫中確定第一候選問題集包括：

根據所述多模態特征，確定與所述至少兩個子信息相關聯的問題類別；以及

將所述問題庫中與所述問題類別相對應的問題，添加至所述第一候選問題集。

3.根據權利要求1所述的方法，其中，所述確定所述至少兩個子信息中的每個子信息對應的第二候選問題集包括：

響應于檢測到所述至少兩個子信息包括文本信息，確定所述文本信息的文本向量；以及

根據所述文本向量和所述問題庫中問題的問題向量之間的第一相似度，從所述問題庫中確定與所述文本信息對應的第二候選問題集。

4.根據權利要求1所述的方法，其中，所述確定所述至少兩個子信息中的每個子信息對應的第二候選問題集包括：

響應于檢測到所述至少兩個子信息包括音頻信息，確定與所述音頻信息對應的參考文本信息；

確定所述參考文本信息的參考文本向量；以及

根據所述參考文本向量和所述問題庫中問題的問題向量之間的第二相似度，從所述問題庫中確定與所述音頻信息對應的第二候選問題集。

5.根據權利要求1所述的方法，其中，所述確定所述至少兩個子信息中的每個子信息對應的第二候選問題集包括：

響應于檢測到所述至少兩個子信息包括圖像信息，確定所述圖像信息的圖像類別；以及

根據所述圖像類別，從所述問題庫中確定與所述圖像信息相對應的第二候選問題集。

6.根據權利要求1至5中任意一項所述的方法，其中，所述根據所述第一候選問題集和與所述每個子信息對應的第二候選問題集，確定目標問題包括：

針對所述第一候選問題集和所述第二候選問題集中每個候選問題，根據針對所述候選問題的評價指標，確定所述候選問題的評價值；以及

根據所述每個候選問題的評價值，確定所述目標問題。

7.根據權利要求6所述的方法，其中，所述評價指標包括以下中的至少一個：基于所述多模態特征確定的問題類別的第一分類置信度，所述輸入信息中圖像信息的圖像類別的第二分類置信度，基于所述輸入信息中文本信息和所述候選問題確定的第一相似度，以及基于參考文本信息和所述候選問題確定的第二相似度，其中所述參考文本信息是根據所述輸入信息中的音頻信息確定的。

8.根據權利要求7所述的方法，其中，所述評價指標包括第一分類置信度、第二分類置信度、第一相似度和第二相似度；所述根據針對所述候選問題的評價指標，確定所述候選問題的評價值包括：

針對所述候選問題，分別基于所述第一分類置信度、所述第二分類置信度、所述第一相似度和所述第二相似度，確定第一子評價值、第二子評價值、第三子評價值和第四子評價值；以及

根據所述第一子評價值、所述第二子評價值、所述第三子評價值以及所述第四子評價值，確定所述候選問題的評價值。

9.根據權利要求6所述的方法，其中，所述根據所述每個候選問題的評價值，確定所述目標問題包括：

響應于檢測到最大評價值大于等于第一閾值，將與所述最大評價值對應的候選問題，確定為所述目標問題；以及

響應于檢測到所述最大評價值小于所述第一閾值，根據評價值的排序，將預定數量個問題確定為所述目標問題。