[發(fā)明專利]樣本數(shù)據(jù)處理方法、裝置和計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)在審
| 申請(qǐng)?zhí)枺?/td> | 201711318024.1 | 申請(qǐng)日: | 2017-12-12 |
| 公開(公告)號(hào): | CN108009589A | 公開(公告)日: | 2018-05-08 |
| 發(fā)明(設(shè)計(jì))人: | 余宗橋 | 申請(qǐng)(專利權(quán))人: | 騰訊科技(深圳)有限公司 |
| 主分類號(hào): | G06K9/62 | 分類號(hào): | G06K9/62 |
| 代理公司: | 深圳市隆天聯(lián)鼎知識(shí)產(chǎn)權(quán)代理有限公司 44232 | 代理人: | 劉抗美;葉虹 |
| 地址: | 518000 廣東省深圳*** | 國(guó)省代碼: | 廣東;44 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 樣本 數(shù)據(jù)處理 方法 裝置 計(jì)算機(jī) 可讀 存儲(chǔ) 介質(zhì) | ||
1.一種樣本數(shù)據(jù)處理方法,其特征在于,所述方法包括:
獲取通過初始樣本數(shù)據(jù)和標(biāo)注結(jié)果進(jìn)行模型訓(xùn)練所得到的分類模型;
通過所述分類模型進(jìn)行模型重訓(xùn)練樣本數(shù)據(jù)的自動(dòng)標(biāo)注,所述模型重訓(xùn)練樣本數(shù)據(jù)是對(duì)所述初始樣本數(shù)據(jù)的擴(kuò)充;
獲取所述模型重訓(xùn)練樣本數(shù)據(jù)對(duì)應(yīng)的自動(dòng)標(biāo)注結(jié)果;
顯示所述模型重訓(xùn)練樣本數(shù)據(jù)以及所對(duì)應(yīng)自動(dòng)標(biāo)注結(jié)果,并接收對(duì)顯示的所述自動(dòng)標(biāo)注結(jié)果進(jìn)行修正的選擇,獲得所述模型重訓(xùn)練樣本數(shù)據(jù)的標(biāo)注擴(kuò)充結(jié)果;
將所述模型重訓(xùn)練樣本數(shù)據(jù)和標(biāo)注擴(kuò)充結(jié)果回饋至所述模型訓(xùn)練,直至所得到分類模型不再獲得分類性能提升。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述獲取初始樣本數(shù)據(jù)和標(biāo)注結(jié)果進(jìn)行模型訓(xùn)練所得到的分類模型之前,所述方法還包括:
接收對(duì)模型訓(xùn)練所使用初始樣本數(shù)據(jù)的選擇,獲得初始樣本數(shù)據(jù)和對(duì)應(yīng)于所述初始樣本數(shù)據(jù)的標(biāo)注結(jié)果;
通過所述初始樣本數(shù)據(jù)和標(biāo)注結(jié)果進(jìn)行模型訓(xùn)練獲得初始的分類模型。
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,對(duì)應(yīng)于所述初始樣本數(shù)據(jù)的標(biāo)注結(jié)果是人工標(biāo)注結(jié)果和/或通過所述初始樣本數(shù)據(jù)所相關(guān)的數(shù)據(jù)挖掘而獲得;
所述通過所述初始樣本數(shù)據(jù)和標(biāo)注結(jié)果進(jìn)行模型訓(xùn)練獲得初始的分類模型,包括:
以初始樣本數(shù)據(jù)及所對(duì)應(yīng)人工標(biāo)注結(jié)果和/或數(shù)據(jù)挖掘而獲得的標(biāo)注結(jié)果,啟動(dòng)所述模型訓(xùn)練得到初始的分類模型,所述初始樣本數(shù)據(jù)在數(shù)量上相對(duì)少于所述模型重訓(xùn)練樣本數(shù)據(jù)。
4.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述模型重訓(xùn)練樣本數(shù)據(jù)包括初始樣本數(shù)據(jù)和/或擴(kuò)充樣本數(shù)據(jù);
所述通過所述分類模型進(jìn)行模型重訓(xùn)練樣本數(shù)據(jù)的自動(dòng)標(biāo)注,所述模型重訓(xùn)練樣本數(shù)據(jù)是對(duì)所述初始樣本數(shù)據(jù)的擴(kuò)充,包括:
將所述初始樣本數(shù)據(jù)和/或擴(kuò)充樣本數(shù)據(jù)輸入所述分類模型,獲得所述初始樣本數(shù)據(jù)和/或擴(kuò)充樣本數(shù)據(jù)分別對(duì)應(yīng)于標(biāo)簽的置信度;
根據(jù)所述置信度為所述初始樣本數(shù)據(jù)和/或擴(kuò)充樣本數(shù)據(jù)獲得自動(dòng)標(biāo)注的標(biāo)簽,所述自動(dòng)標(biāo)注的標(biāo)簽形成所述初始樣本數(shù)據(jù)和/或擴(kuò)充樣本數(shù)據(jù)對(duì)應(yīng)的自動(dòng)標(biāo)注結(jié)果。
5.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述顯示所述模型重訓(xùn)練樣本數(shù)據(jù)以及所對(duì)應(yīng)自動(dòng)標(biāo)注結(jié)果,并接收對(duì)顯示的所述自動(dòng)標(biāo)注結(jié)果進(jìn)行修正的選擇,獲得所述模型重訓(xùn)練樣本數(shù)據(jù)的標(biāo)注擴(kuò)充結(jié)果,包括:
逐一顯示所述模型重訓(xùn)練樣本數(shù)據(jù),并為顯示的所述模型重訓(xùn)練樣本數(shù)據(jù)相應(yīng)顯示所對(duì)應(yīng)的自動(dòng)標(biāo)注結(jié)果;
根據(jù)配置的標(biāo)簽集合進(jìn)行所顯示自動(dòng)標(biāo)注結(jié)果中標(biāo)簽的糾錯(cuò)以及對(duì)新增標(biāo)簽的選擇,獲得所述模型重訓(xùn)練樣本數(shù)據(jù)的標(biāo)注擴(kuò)充結(jié)果。
6.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述將所述模型重訓(xùn)練樣本數(shù)據(jù)和標(biāo)注擴(kuò)充結(jié)果回饋至所述模型訓(xùn)練,直至所得到分類模型不再獲得分類性能提升,包括:
將所述模型重訓(xùn)練樣本數(shù)據(jù)和標(biāo)注擴(kuò)充結(jié)果回饋至所述分類模型的模型訓(xùn)練,通過所述模型重訓(xùn)練樣本數(shù)據(jù)和標(biāo)注擴(kuò)充結(jié)果再次進(jìn)行所述分類模型的模型訓(xùn)練;
如果再次進(jìn)行模型訓(xùn)練而獲得的分類模型中不再獲得分類性能提升,則結(jié)束迭代進(jìn)行的所述模型重訓(xùn)練樣本數(shù)據(jù)自動(dòng)標(biāo)注以及自動(dòng)標(biāo)注結(jié)果修正。
7.根據(jù)權(quán)利要求6所述的方法,其特征在于,所述將所述模型重訓(xùn)練樣本數(shù)據(jù)和標(biāo)注擴(kuò)充結(jié)果回饋至所述模型訓(xùn)練,直至所得到分類模型的分類性能不再提升,還包括:
如果再次進(jìn)行模型訓(xùn)練而獲得的分類模型中分類性能獲得提升,則繼續(xù)迭代進(jìn)行模型重訓(xùn)練樣本數(shù)據(jù)自動(dòng)標(biāo)注以及自動(dòng)標(biāo)注結(jié)果修正;
由繼續(xù)迭代所獲得的模型重訓(xùn)練樣本數(shù)據(jù)和標(biāo)注擴(kuò)充結(jié)果回饋至所述模型訓(xùn)練,繼續(xù)迭代進(jìn)行所述分類模型的模型訓(xùn)練。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于騰訊科技(深圳)有限公司,未經(jīng)騰訊科技(深圳)有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201711318024.1/1.html,轉(zhuǎn)載請(qǐng)聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06K 數(shù)據(jù)識(shí)別;數(shù)據(jù)表示;記錄載體;記錄載體的處理
G06K9-00 用于閱讀或識(shí)別印刷或書寫字符或者用于識(shí)別圖形,例如,指紋的方法或裝置
G06K9-03 .錯(cuò)誤的檢測(cè)或校正,例如,用重復(fù)掃描圖形的方法
G06K9-18 .應(yīng)用具有附加代碼標(biāo)記或含有代碼標(biāo)記的打印字符的,例如,由不同形狀的各個(gè)筆畫組成的,而且每個(gè)筆畫表示不同的代碼值的字符
G06K9-20 .圖像捕獲
G06K9-36 .圖像預(yù)處理,即無須判定關(guān)于圖像的同一性而進(jìn)行的圖像信息處理
G06K9-60 .圖像捕獲和多種預(yù)處理作用的組合
- 樣本引入裝置、樣本引入基片和樣本引入方法
- 樣本查找方法、裝置及系統(tǒng)
- 模型訓(xùn)練、樣本平衡方法及裝置以及個(gè)人信用評(píng)分系統(tǒng)
- 樣本輸送系統(tǒng)、樣本輸送方法以及樣本檢測(cè)系統(tǒng)
- 樣本分析裝置、樣本檢測(cè)設(shè)備及樣本檢測(cè)方法
- 樣本檢測(cè)方法、樣本檢測(cè)裝置及樣本檢測(cè)系統(tǒng)
- 樣本架、樣本混勻系統(tǒng)及樣本分析儀
- 樣本收集管及樣本收集系統(tǒng)
- 樣本數(shù)據(jù)集的擴(kuò)容方法及模型的訓(xùn)練方法
- 行人重識(shí)別的噪聲樣本識(shí)別方法、裝置、設(shè)備和存儲(chǔ)介質(zhì)
- 數(shù)據(jù)處理設(shè)備,數(shù)據(jù)處理方法,和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理電路、數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法、數(shù)據(jù)處理控制方法
- 數(shù)據(jù)處理設(shè)備、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法及計(jì)算機(jī)可讀取的記錄介質(zhì)
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法以及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法以及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 一種數(shù)據(jù)庫(kù)讀寫分離的方法和裝置
- 一種手機(jī)動(dòng)漫人物及背景創(chuàng)作方法
- 一種通訊綜合測(cè)試終端的測(cè)試方法
- 一種服裝用人體測(cè)量基準(zhǔn)點(diǎn)的獲取方法
- 系統(tǒng)升級(jí)方法及裝置
- 用于虛擬和接口方法調(diào)用的裝置和方法
- 線程狀態(tài)監(jiān)控方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)
- 一種JAVA智能卡及其虛擬機(jī)組件優(yōu)化方法
- 檢測(cè)程序中方法耗時(shí)的方法、裝置及存儲(chǔ)介質(zhì)
- 函數(shù)的執(zhí)行方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)





