[發(fā)明專利]一種非結(jié)構(gòu)化數(shù)據(jù)識(shí)別的方法和裝置有效
申請(qǐng)?zhí)枺?/td> | 201610362704.2 | 申請(qǐng)日: | 2016-05-26 |
公開(公告)號(hào): | CN107436895B | 公開(公告)日: | 2020-12-04 |
發(fā)明(設(shè)計(jì))人: | 劉娟;許婧;思永坤;藍(lán)珊 | 申請(qǐng)(專利權(quán))人: | 中國(guó)移動(dòng)通信集團(tuán)云南有限公司 |
主分類號(hào): | G06F16/25 | 分類號(hào): | G06F16/25 |
代理公司: | 北京派特恩知識(shí)產(chǎn)權(quán)代理有限公司 11270 | 代理人: | 沈寒酉;張穎玲 |
地址: | 650228 云南省*** | 國(guó)省代碼: | 云南;53 |
權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
摘要: | |||
搜索關(guān)鍵詞: | 一種 結(jié)構(gòu) 數(shù)據(jù) 識(shí)別 方法 裝置 | ||
1.一種非結(jié)構(gòu)化數(shù)據(jù)識(shí)別的方法,其特征在于,所述方法包括:
對(duì)非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行完整性檢測(cè);
當(dāng)所述非結(jié)構(gòu)化數(shù)據(jù)確定為完整的非結(jié)構(gòu)化數(shù)據(jù)時(shí),將所述非結(jié)構(gòu)化數(shù)據(jù)與預(yù)存儲(chǔ)的關(guān)鍵詞進(jìn)行匹配,獲取與所述非結(jié)構(gòu)化數(shù)據(jù)相對(duì)應(yīng)的待確定標(biāo)簽;
當(dāng)所述待確定標(biāo)簽沒有與特例標(biāo)簽相匹配,對(duì)所述待確定標(biāo)簽類型的數(shù)量進(jìn)行統(tǒng)計(jì);當(dāng)所述待確定標(biāo)簽類型的數(shù)量小于等于預(yù)設(shè)的閾值時(shí),將所述非結(jié)構(gòu)化數(shù)據(jù)中主詞的出現(xiàn)頻率由高到低進(jìn)行排序;確定所述非結(jié)構(gòu)化數(shù)據(jù)中出現(xiàn)頻率最高的主詞所對(duì)應(yīng)的第二待確定標(biāo)簽數(shù)量;若所述非結(jié)構(gòu)化數(shù)據(jù)中出現(xiàn)頻率最高的主詞對(duì)應(yīng)的第二待確定標(biāo)簽數(shù)量為一,則將所述第二待確定標(biāo)簽確定為與所述非結(jié)構(gòu)化數(shù)據(jù)最終相匹配的標(biāo)簽;所述特例標(biāo)簽為優(yōu)先級(jí)別最高的標(biāo)簽;
當(dāng)所述非結(jié)構(gòu)化數(shù)據(jù)中出現(xiàn)頻率最高的主詞對(duì)應(yīng)的第二待確定標(biāo)簽數(shù)量大于一時(shí),根據(jù)所述非結(jié)構(gòu)化數(shù)據(jù)的主詞出現(xiàn)頻率和副詞出現(xiàn)頻率,確定所述第二待確定標(biāo)簽的出現(xiàn)頻率;將所述出現(xiàn)頻率最高的第二待確定標(biāo)簽確定為與所述非結(jié)構(gòu)化數(shù)據(jù)最終相匹配的標(biāo)簽。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述當(dāng)所述非結(jié)構(gòu)化數(shù)據(jù)確定為完整的非結(jié)構(gòu)化數(shù)據(jù)時(shí),將所述非結(jié)構(gòu)化數(shù)據(jù)與預(yù)存儲(chǔ)的關(guān)鍵詞進(jìn)行匹配,獲取與所述非結(jié)構(gòu)化數(shù)據(jù)相對(duì)應(yīng)的待確定標(biāo)簽,包括:
將所述非結(jié)構(gòu)化數(shù)據(jù)的主詞、副詞、排除詞與預(yù)存儲(chǔ)關(guān)鍵詞的主詞、副詞、排除詞進(jìn)行匹配;
若所述非結(jié)構(gòu)化數(shù)據(jù)的主詞、副詞與預(yù)存儲(chǔ)關(guān)鍵詞的主詞、副詞相匹配,則生成與所述非結(jié)構(gòu)化數(shù)據(jù)相對(duì)應(yīng)的待確定標(biāo)簽;
若所述非結(jié)構(gòu)化數(shù)據(jù)的排除詞與預(yù)存儲(chǔ)關(guān)鍵詞的排除詞匹配,則輸出關(guān)鍵字錯(cuò)誤日志。
3.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述當(dāng)所述待確定標(biāo)簽沒有與特例標(biāo)簽相匹配,對(duì)所述待確定標(biāo)簽類型的數(shù)量進(jìn)行統(tǒng)計(jì)之前,包括:
當(dāng)所述待確定標(biāo)簽數(shù)量只有一條時(shí),將所述待確定標(biāo)簽確定為與所述非結(jié)構(gòu)化數(shù)據(jù)最終相匹配的標(biāo)簽;
當(dāng)所述待確定標(biāo)簽數(shù)量大于一時(shí),若所述待確定標(biāo)簽中存在與特例標(biāo)簽相匹配的標(biāo)簽,則將與特例標(biāo)簽匹配的第一待確定標(biāo)簽確定為與非結(jié)構(gòu)化數(shù)據(jù)最終相匹配的標(biāo)簽。
4.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述方法還包括:
當(dāng)所述待確定標(biāo)簽類型的數(shù)量大于預(yù)設(shè)的閾值時(shí),輸出關(guān)鍵詞錯(cuò)誤日志。
5.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述當(dāng)所述非結(jié)構(gòu)化數(shù)據(jù)中出現(xiàn)頻率最高的主詞對(duì)應(yīng)的第二待確定標(biāo)簽數(shù)量大于一時(shí),根據(jù)所述非結(jié)構(gòu)化數(shù)據(jù)的主詞出現(xiàn)頻率和副詞出現(xiàn)頻率,確定所述第二待確定標(biāo)簽的出現(xiàn)頻率;其中,
所述第二待確定標(biāo)簽的出現(xiàn)頻率等于所述主詞出現(xiàn)頻率乘以所述副詞出現(xiàn)頻率;
將所述第二待確定標(biāo)簽的出現(xiàn)頻率由高到低進(jìn)行排序;
將所述出現(xiàn)頻率最高的第二待確定標(biāo)簽確定為與所述非結(jié)構(gòu)化數(shù)據(jù)最終相匹配的標(biāo)簽。
6.一種非結(jié)構(gòu)化數(shù)據(jù)識(shí)別的裝置,其特征在于,所述裝置包括:檢測(cè)模塊、獲取模塊和確定模塊;其中,
所述檢測(cè)模塊,用于對(duì)非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行完整性檢測(cè);
所述獲取模塊,用于當(dāng)所述非結(jié)構(gòu)化數(shù)據(jù)確定為完整的非結(jié)構(gòu)化數(shù)據(jù)時(shí),將所述非結(jié)構(gòu)化數(shù)據(jù)與預(yù)存儲(chǔ)的關(guān)鍵詞進(jìn)行匹配,獲取與所述非結(jié)構(gòu)化數(shù)據(jù)相對(duì)應(yīng)的待確定標(biāo)簽;
所述確定模塊,包括第三確定子模塊和第四確定子模塊;其中,所述第三確定子模塊用于當(dāng)所述待確定標(biāo)簽沒有與特例標(biāo)簽相匹配,對(duì)所述待確定標(biāo)簽類型的數(shù)量進(jìn)行統(tǒng)計(jì);當(dāng)所述待確定標(biāo)簽類型的數(shù)量小于等于預(yù)設(shè)的閾值時(shí),將所述非結(jié)構(gòu)化數(shù)據(jù)中主詞的出現(xiàn)頻率由高到低進(jìn)行排序;確定所述非結(jié)構(gòu)化數(shù)據(jù)中出現(xiàn)頻率最高的主詞所對(duì)應(yīng)的第二待確定標(biāo)簽數(shù)量;若所述非結(jié)構(gòu)化數(shù)據(jù)中出現(xiàn)頻率最高的主詞對(duì)應(yīng)的第二待確定標(biāo)簽數(shù)量為一,則將所述第二待確定標(biāo)簽確定為與所述非結(jié)構(gòu)化數(shù)據(jù)最終相匹配的標(biāo)簽;所述特例標(biāo)簽為優(yōu)先級(jí)別最高的標(biāo)簽;
所述第四確定子模塊用于當(dāng)所述非結(jié)構(gòu)化數(shù)據(jù)中出現(xiàn)頻率最高的主詞對(duì)應(yīng)的第二待確定標(biāo)簽數(shù)量大于一時(shí),根據(jù)所述非結(jié)構(gòu)化數(shù)據(jù)的主詞出現(xiàn)頻率和副詞出現(xiàn)頻率,確定所述第二待確定標(biāo)簽的出現(xiàn)頻率;將所述出現(xiàn)頻率最高的第二待確定標(biāo)簽確定為與所述非結(jié)構(gòu)化數(shù)據(jù)最終相匹配的標(biāo)簽。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于中國(guó)移動(dòng)通信集團(tuán)云南有限公司,未經(jīng)中國(guó)移動(dòng)通信集團(tuán)云南有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201610362704.2/1.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專利網(wǎng)。
- 卡片結(jié)構(gòu)、插座結(jié)構(gòu)及其組合結(jié)構(gòu)
- 鋼結(jié)構(gòu)平臺(tái)結(jié)構(gòu)
- 鋼結(jié)構(gòu)支撐結(jié)構(gòu)
- 鋼結(jié)構(gòu)支撐結(jié)構(gòu)
- 單元結(jié)構(gòu)、結(jié)構(gòu)部件和夾層結(jié)構(gòu)
- 鋼結(jié)構(gòu)扶梯結(jié)構(gòu)
- 鋼結(jié)構(gòu)隔墻結(jié)構(gòu)
- 鋼結(jié)構(gòu)連接結(jié)構(gòu)
- 螺紋結(jié)構(gòu)、螺孔結(jié)構(gòu)、機(jī)械結(jié)構(gòu)和光學(xué)結(jié)構(gòu)
- 螺紋結(jié)構(gòu)、螺孔結(jié)構(gòu)、機(jī)械結(jié)構(gòu)和光學(xué)結(jié)構(gòu)
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法、數(shù)據(jù)系統(tǒng)、接收設(shè)備和數(shù)據(jù)讀取方法
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄裝置、數(shù)據(jù)記錄媒體、數(shù)據(jù)重播方法和數(shù)據(jù)重播裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)發(fā)送系統(tǒng)、數(shù)據(jù)發(fā)送裝置以及數(shù)據(jù)結(jié)構(gòu)
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法及數(shù)據(jù)系統(tǒng)
- 數(shù)據(jù)嵌入裝置、數(shù)據(jù)嵌入方法、數(shù)據(jù)提取裝置及數(shù)據(jù)提取方法
- 數(shù)據(jù)管理裝置、數(shù)據(jù)編輯裝置、數(shù)據(jù)閱覽裝置、數(shù)據(jù)管理方法、數(shù)據(jù)編輯方法以及數(shù)據(jù)閱覽方法
- 數(shù)據(jù)發(fā)送和數(shù)據(jù)接收設(shè)備、數(shù)據(jù)發(fā)送和數(shù)據(jù)接收方法
- 數(shù)據(jù)發(fā)送裝置、數(shù)據(jù)接收裝置、數(shù)據(jù)收發(fā)系統(tǒng)、數(shù)據(jù)發(fā)送方法、數(shù)據(jù)接收方法和數(shù)據(jù)收發(fā)方法
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置
- 識(shí)別媒體、識(shí)別媒體的識(shí)別方法、識(shí)別對(duì)象物品以及識(shí)別裝置
- 一種探針卡識(shí)別裝置和方法
- 識(shí)別裝置、識(shí)別方法以及記錄介質(zhì)
- 識(shí)別裝置、識(shí)別系統(tǒng),識(shí)別方法以及存儲(chǔ)介質(zhì)
- 識(shí)別程序、識(shí)別方法以及識(shí)別裝置
- 車載身份識(shí)別方法及系統(tǒng)
- 車載身份識(shí)別方法及系統(tǒng)
- 車載身份識(shí)別方法及系統(tǒng)
- 識(shí)別裝置、識(shí)別方法以及識(shí)別程序
- 識(shí)別裝置、識(shí)別方法及識(shí)別程序
- 一種數(shù)據(jù)庫(kù)讀寫分離的方法和裝置
- 一種手機(jī)動(dòng)漫人物及背景創(chuàng)作方法
- 一種通訊綜合測(cè)試終端的測(cè)試方法
- 一種服裝用人體測(cè)量基準(zhǔn)點(diǎn)的獲取方法
- 系統(tǒng)升級(jí)方法及裝置
- 用于虛擬和接口方法調(diào)用的裝置和方法
- 線程狀態(tài)監(jiān)控方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)
- 一種JAVA智能卡及其虛擬機(jī)組件優(yōu)化方法
- 檢測(cè)程序中方法耗時(shí)的方法、裝置及存儲(chǔ)介質(zhì)
- 函數(shù)的執(zhí)行方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)