[發(fā)明專利]詞性標注方法、裝置、電子設(shè)備及存儲介質(zhì)在審
| 申請?zhí)枺?/td> | 202110787205.9 | 申請日: | 2021-07-13 |
| 公開(公告)號: | CN113468878A | 公開(公告)日: | 2021-10-01 |
| 發(fā)明(設(shè)計)人: | 李揚名 | 申請(專利權(quán))人: | 騰訊科技(深圳)有限公司 |
| 主分類號: | G06F40/284 | 分類號: | G06F40/284 |
| 代理公司: | 廣州三環(huán)專利商標代理有限公司 44202 | 代理人: | 熊永強;杜維 |
| 地址: | 518057 廣東省深圳*** | 國省代碼: | 廣東;44 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 詞性 標注 方法 裝置 電子設(shè)備 存儲 介質(zhì) | ||
本申請實施例公開了一種詞性標注方法、裝置、電子設(shè)備及存儲介質(zhì),應(yīng)用于自然語言處理技術(shù)領(lǐng)域。其中方法包括:獲取待標注文本中的未劃分文本和切片集合,該切片集合包括待標注文本中已劃分的k?1個切片,未劃分文本為待標注文本中除k?1個切片以外的文本,根據(jù)未劃分文本的向量表示和切片集合中第k?1個切片的向量表示,確定待標注文本中的第k個切片的依存關(guān)系,在未劃分文本中獲取第k個切片的候選分詞集合,根據(jù)第k個切片的依存關(guān)系和候選分詞集合中每個候選分詞的向量表示,從候選分詞集合中確定出第k個切片,該第k個切片用于指示第k個切片對應(yīng)的分詞以及分詞的詞性。采用本申請實施例,可以提高詞性標注效率。
技術(shù)領(lǐng)域
本申請涉及自然語言處理技術(shù)領(lǐng)域,尤其涉及一種詞性標注方法、裝置、電子設(shè)備及存儲介質(zhì)。
背景技術(shù)
目前,可以通過自然語言處理技術(shù)對文本進行預(yù)處理得到文本中的詞語以及每個詞語的詞性,進而可以將進行了詞性標注的文本應(yīng)用到下游任務(wù)中,如文本語義分析等。由于文本的詞性標注結(jié)果直接影響下游任務(wù),因此文本的詞性標注十分重要。現(xiàn)有的詞性標注技術(shù)通常是通過對文本中的字進行序列標注,并基于該序列標注抽取出連續(xù)字作為詞語,并分析詞語的詞性,由于采用字級別標注,時間復(fù)雜度高,導(dǎo)致詞性標注效率低。因此,如何在文本預(yù)處理過程中提高詞性標注效率成為一個亟待解決的問題。
發(fā)明內(nèi)容
本申請實施例提供了一種詞性標注方法、裝置、電子設(shè)備及存儲介質(zhì),可以提高詞性標注效率。
一方面,本申請實施例提供了一種詞性標注方法,該方法包括:
獲取待標注文本中的未劃分文本和切片集合;所述切片集合包括所述待標注文本中已劃分的k-1個切片,所述未劃分文本為所述待標注文本中除所述k-1個切片以外的文本;
根據(jù)所述未劃分文本的向量表示和所述切片集合中第k-1個切片的向量表示,確定所述待標注文本中的第k個切片的依存關(guān)系;所述第k個切片的依存關(guān)系用于表示所述第k個切片與所述切片集合的相關(guān)性;
在所述未劃分文本中獲取所述第k個切片的候選分詞集合;
根據(jù)所述第k個切片的依存關(guān)系和所述候選分詞集合中每個候選分詞的向量表示,從所述候選分詞集合中確定出所述第k個切片;所述第k個切片用于指示所述第k個切片對應(yīng)的分詞以及所述分詞的詞性。
一方面,本申請實施例提供了一種詞性標注裝置,該裝置包括:
獲取模塊,用于獲取待標注文本中的未劃分文本和切片集合;所述切片集合包括所述待標注文本中已劃分的k-1個切片,所述未劃分文本為所述待標注文本中除所述k-1個切片以外的文本;
確定模塊,用于根據(jù)所述未劃分文本的向量表示和所述切片集合中第k-1個切片的向量表示,確定所述待標注文本中的第k個切片的依存關(guān)系;所述第k個切片的依存關(guān)系用于表示所述第k個切片與所述切片集合的相關(guān)性;
所述獲取模塊,還用于在所述未劃分文本中獲取所述第k個切片的候選分詞集合;
所述確定模塊,還用于根據(jù)所述第k個切片的依存關(guān)系和所述候選分詞集合中每個候選分詞的向量表示,從所述候選分詞集合中確定出所述第k個切片;所述第k個切片用于指示所述第k個切片對應(yīng)的分詞以及所述分詞的詞性。
一方面,本申請實施例提供了一種電子設(shè)備,該電子設(shè)備包括處理器和存儲器,其中,存儲器用于存儲計算機程序,該計算機程序包括程序指令,處理器被配置用于調(diào)用該程序指令,執(zhí)行上述方法中的部分或全部步驟。
一方面,本申請實施例提供了一種計算機可讀存儲介質(zhì),該計算機可讀存儲介質(zhì)存儲有計算機程序,該計算機程序包括程序指令,該程序指令被處理器執(zhí)行時,用于執(zhí)行上述方法中的部分或全部步驟。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于騰訊科技(深圳)有限公司,未經(jīng)騰訊科技(深圳)有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110787205.9/2.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。





