[發明專利]語音識別文本連貫性處理方法和裝置

有效

• 申請號: 202010694673.7
• 申請日: 2020-07-17
• 公開（公告）號: CN111832308B
• 公開（公告）日: 2023-09-08
• 發明（設計）人: 繆慶亮;吳仁守;朱欽佩;朱少華
• 申請（專利權）人: 思必馳科技股份有限公司
• 主分類號: G06F40/295
• 分類號: G06F40/295;G06F40/30;G06F40/211;G10L15/26
• 代理公司: 北京商專永信知識產權代理事務所(普通合伙) 11400
• 代理人: 黃謙;鄧婷婷

1.一種語音識別文本連貫性處理方法，包括：

通過預設分類模板或者預設分類模型識別出語音識別文本中的至少一個關鍵信息的起始位置，其中所述預設分類模板或所述預設分類模型均是基于預設關鍵字形成，所述關鍵信息為與所述預設關鍵字對應的內容；

從所述起始位置開始取多個句子，根據每一句子中的每個詞或每個詞組的第一詞嵌入計算與所述每一句子對應的第二詞嵌入，根據所述第二詞嵌入計算所述多個句子組成的文本片段對應的第三詞嵌入，其中，所述第一詞嵌入是將所述每一句子中的每個詞或每個詞組轉換為每個詞或每個詞組的向量表示，所述第二詞嵌入是通過所述每個詞或所述每個詞組的向量表示直接累加獲得與所述每一句子對應的向量表示，所述第三詞嵌入是通過所述每一句子的向量表示直接累加獲得所述多個句子組成的文本片段對應的向量表示；

基于所述第一詞嵌入、所述第二詞嵌入和所述第三詞嵌入計算所述每一句子與其他句子之間的相似度、所述每一句子與起始句子之間的距離衰減以及每一句子與起始句子之間的連貫度；

通過余弦距離衰減計算所述第二詞嵌入和所述第三詞嵌入的相似度；

基于預設距離衰減公式計算所述每一句子到所述起始句子的距離衰減，其中，所述預設距離衰減公式為：

；

其中，N₀=1.0，為預設閾值，l為當前句子到起始句子的距離；

判斷所述每一句子與所述其他句子之間是否包含連詞或所述每一句子與其他句子是否包含公共的實體詞，以計算所述每一句子與所述起始句子的連貫度；

基于所述相似度構建語義圖，并根據所述語義圖計算所述每一句子的重要程度；

利用圖聚類算法獲取一個或多個聚類中心，計算每個聚類中心的相似度、連貫度、重要程度與距離衰減的和值，取所述和值排名前n的句子作為連貫句子序列。

2.根據權利要求1所述的方法，其中，所述基于所述相似度構建語義圖，并根據所述語義圖計算所述每一句子的重要程度包括：

將所述每一句子作為語義圖的節點，將所述節點之間的邊表示所述每一句子與其他句子之間的相似度；

基于所述相似度利用textrank算法計算每一句子的重要程度。

3.根據權利要求1所述的方法，其中，所述預設分類模板由所述預設關鍵字和模板組成，所述方法還包括：

用所述模板和預設關鍵詞訓練所述預設分類模型，從而讓所述預設分類模型能夠識別出所述語音識別文本內的關鍵信息。

4.根據權利要求1所述的方法，其中，所述從所述起始位置開始取多個句子，根據每一句子中的每個詞或每個詞組的第一詞嵌入計算與所述每一句子對應的第二詞嵌入，根據所述第二詞嵌入計算所述多個句子組成的文本片段對應的第三詞嵌入包括：

從所述起始位置開始取多個句子，將每一句子中的每個詞或每個詞組的第一詞嵌入累加，獲得與所述每一句子對應的第二詞嵌入；

將所述第二詞嵌入累加獲得所述多個句子組成的文本片段對應的第三詞嵌入。

5.根據權利要求1-4中任一項所述的方法，其中，所述方法還包括：

響應于用戶的音頻輸入或者錄音，將所述音頻輸入或者所述錄音轉換成語音識別文本。