日韩在线一区二区三区,日本午夜一区二区三区,国产伦精品一区二区三区四区视频,欧美日韩在线观看视频一区二区三区 ,一区二区视频在线,国产精品18久久久久久首页狼,日本天堂在线观看视频,综合av一区

[發明專利]一種基于bert+bilstm+crf并融合句型分析的查詢意圖識別方法在審

專利信息
申請號: 202110361114.9 申請日: 2021-04-02
公開(公告)號: CN113032568A 公開(公告)日: 2021-06-25
發明(設計)人: 朱江;程燕;張振海 申請(專利權)人: 同方知網(北京)技術有限公司;《中國學術期刊(光盤版)》電子雜志社有限公司
主分類號: G06F16/35 分類號: G06F16/35;G06F40/30;G06F40/295;G06F40/216;G06F40/242;G06F40/211
代理公司: 北京天奇智新知識產權代理有限公司 11340 代理人: 陳新勝
地址: 100084 北京市海淀區清華園清華*** 國省代碼: 北京;11
權利要求書: 查看更多 說明書: 查看更多
摘要:
搜索關鍵詞: 一種 基于 bert bilstm crf 融合 句型 分析 查詢 意圖 識別 方法
【說明書】:

發明公開了一種基于bert+bilstm+crf并融合句型分析的查詢意圖識別方法,包括:標注構建數據集,定義領域意圖,明確意圖分類、意圖詞槽,構建詞槽對應的領域術語集,收集問題集,標注問題意圖分類和詞槽信息;根據標注的問題和對應的意圖信息,生成句型模式,用于意圖識別模型推理階段的匹配驗證;基于bert+bilstm+crf構建查詢意圖識別模型。本發明融合槽位詞典匹配,句型模式分析,基于bert+bilstm+crf的槽位實體識別,基于bert的意圖分類,較好的解決了模型訓練數據與模型預測數據分布不一致時,模型錯誤識別的問題,提高了模型對用戶輸入口語化內容意圖識別的精確性。

技術領域

本發明涉及自然語言處理、人工智能技術領域,尤其涉及一種基于bert+bilstm+crf并融合句型分析的查詢意圖識別方法。

背景技術

現有所謂意圖識別實際就是自然語言理解(NLU),是自然語言處理重要任務之一。自然語言理解就是希望機器像人一樣,具備正常人的語言理解能力,通過意圖的準確識別,明確用戶需求,從而提供給用戶精準服務。

隨著深度學習的發展,以CNN、RNN、LSTM、注意力機制等深度學習算法為基礎的神經網絡模型開始廣泛應用于文本分類、意圖識別領域中,不斷取得SOTA效果。基于深度學習的意圖識別模型意圖識別率高,但識別結果卻有不可解釋性,并且模型識別率嚴重依賴訓練數據的質量。由于自然語言的復雜和多樣性,訓練模型所使用的訓練數據往往存在偏倚,與實際輸入數據分布不一致,這對模型的泛化能力提出了極大的考驗。在實際使用模型的過程中,由于訓練數據稀疏,必然存在大量模型從未見過的輸入。這時如何評價模型識別結果,能否發現模型的識別錯誤,甚至對識別結果做出適當的修正,就顯得十分重要。當輸入問句中的實體或句型結構,訓練數據中從來沒有出現過,模型可能會給出錯誤的識別結果。

綜上,在實際工程應用中,迫切需要一種意圖識別可靠、識別錯誤可干預修正的增強型意圖識別方法。

發明內容

為解決上述技術問題,本發明的目的是提供一種基于bert+bilstm+crf并融合句型分析的查詢意圖識別方法,該方法綜合多種策略以實現對單一神經網絡意圖識別結果的正確性判斷、錯誤結果適度糾正、神經網絡識別結果增強的目的,以達到精確語義識別,滿足多樣化查詢意圖的識別。

本發明的目的通過以下的技術方案來實現:

一種基于bert+bilstm+crf并融合句型分析的查詢意圖識別方法,包括以下步驟:

A標注構建數據集,定義領域意圖,明確意圖分類、意圖詞槽,構建詞槽對應的領域術語集,收集問題集,標注問題意圖分類和詞槽信息;

B根據標注的問題和對應的意圖信息,生成句型模式,用于意圖識別模型推理階段的匹配驗證;

C基于bert+bilstm+crf構建查詢意圖識別模型。

與現有技術相比,本發明的一個或多個實施例可以具有如下優點:

融合槽位詞典匹配,句型模式分析,基于bert+bilstm+crf的槽位實體識別,基于bert的意圖分類,較好的解決了模型訓練數據與模型預測數據分布不一致時,模型錯誤識別的問題,提高了模型對用戶輸入口語化內容意圖識別的精確性。融合傳統方法和深度學習算法的意圖識別方法,二者結果相互驗證,可以使精確性問題識別率更高,開放性問題識別更加貼近用戶需求。

附圖說明

圖1是本發明實施例提供的構建基于bert+bilstm+crf的查詢意圖識別模型流程圖;

圖2是本發明實施例提供的基于bert+bilstm+crf并融合句型分析的查詢意圖識別方法的全流程圖。

具體實施方式

為使本發明的目的、技術方案和優點更加清楚,下面將結合實施例及附圖對本發明作進一步詳細的描述。

下載完整專利技術內容需要扣除積分,VIP會員可以免費下載。

該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于同方知網(北京)技術有限公司;《中國學術期刊(光盤版)》電子雜志社有限公司,未經同方知網(北京)技術有限公司;《中國學術期刊(光盤版)》電子雜志社有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服

本文鏈接:http://www.szxzyx.cn/pat/books/202110361114.9/2.html,轉載請聲明來源鉆瓜專利網。

×

專利文獻下載

說明:

1、專利原文基于中國國家知識產權局專利說明書;

2、支持發明專利 、實用新型專利、外觀設計專利(升級中);

3、專利數據每周兩次同步更新,支持Adobe PDF格式;

4、內容包括專利技術的結構示意圖流程工藝圖技術構造圖

5、已全新升級為極速版,下載速度顯著提升!歡迎使用!

請您登陸后,進行下載,點擊【登陸】 【注冊】

關于我們 尋求報道 投稿須知 廣告合作 版權聲明 網站地圖 友情鏈接 企業標識 聯系我們

鉆瓜專利網在線咨詢

周一至周五 9:00-18:00

咨詢在線客服咨詢在線客服
tel code back_top
主站蜘蛛池模板: 日韩av免费网站| 精品在线观看一区二区| 99re热精品视频国产免费| 在线精品国产一区二区三区88| 精品少妇一区二区三区免费观看焕 | 亚洲欧洲一二三区| 国产在线干| 久久免费视频99| 国产精品视频一区二区三| 亚洲精品一品区二品区三品区| 久久精品国产亚洲7777| 农村妇女毛片精品久久| 精品国产一区二区三区四区vr| 二区三区免费视频| 久久一区二| 狠狠操很很干| 97精品国产97久久久久久| 精品国产乱码一区二区三区a| 亚洲国产精品日本| 99re久久精品国产| 国产suv精品一区二区4| 丰满岳乱妇在线观看中字| yy6080影院旧里番乳色吐息| 欧美乱偷一区二区三区在线| 国产精品久久久久久久久久久久久久久久久久 | 日韩欧美激情| 国产欧美日韩另类| 国产一级在线免费观看| 91一区二区三区在线| 国产精品久久免费视频| 国产精品久久久久久久久久不蜜臀| 欧美日韩国产免费观看| 国产一区二区三区久久久| 午夜av影视| 精品国产乱码一区二区三区a | 色婷婷综合久久久久中文| 精品少妇的一区二区三区四区| 欧美一区二区三区黄| xxxxhdvideosex| 国产一卡二卡在线播放| 免费欧美一级视频| 午夜免费av电影| 国产国产精品久久久久| 欧美日韩一区二区电影| 理论片高清免费理伦片| 首页亚洲欧美制服丝腿| 欧美久久一区二区三区| 性生交片免费看片| 久久两性视频| 亚洲国产精品综合| 91视频国产一区| 视频一区二区国产| 久久99精品一区二区三区| av素人在线| 国产一区二区午夜| 最新国产精品久久精品| 国产精品自产拍在线观看蜜| 国产在线一区观看| 国产精品亚洲一区二区三区| 色婷婷噜噜久久国产精品12p| 亚洲国产精品国自产拍久久| 狠狠色很很在鲁视频| 精品国产乱码一区二区三区a| 欧美精品久久一区| 91精品啪在线观看国产手机 | 狠狠插狠狠爱| 国产精品一区一区三区| 又黄又爽又刺激久久久久亚洲精品| 激情欧美日韩| 99久国产| 午夜情所理论片| 国产99久久九九精品| 国产无遮挡又黄又爽免费网站| 久久免费视频一区| 一区二区三区日韩精品| 日韩av在线高清| 99精品欧美一区二区三区美图| 国产精品99在线播放| 欧美一区二区在线不卡| 96国产精品视频| 亚洲区在线| 夜夜躁日日躁狠狠躁|