[發(fā)明專利]一種數(shù)據(jù)標(biāo)注方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201911423635.1
• 申請(qǐng)日: 2019-12-31
• 公開(kāi)（公告）號(hào): CN113127638A
• 公開(kāi)（公告）日: 2021-07-16
• 發(fā)明（設(shè)計(jì)）人: 胥安東;閆鵬程
• 申請(qǐng)（專利權(quán)）人: 華為技術(shù)有限公司
• 主分類號(hào): G06F16/35
• 分類號(hào): G06F16/35;G06F40/30
• 代理公司: 北京同達(dá)信恒知識(shí)產(chǎn)權(quán)代理有限公司 11291
• 代理人: 周云

1.一種數(shù)據(jù)標(biāo)注方法，其特征在于，包括：

服務(wù)器獲取待標(biāo)注的M條數(shù)據(jù)；所述M為大于1的整數(shù)；

所述服務(wù)器在所述M條數(shù)據(jù)中抽取N條數(shù)據(jù)，并針對(duì)所述N條數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析得到至少一個(gè)模板；每個(gè)所述模板中包括至少一個(gè)槽位，每一個(gè)槽位用于填寫(xiě)至少一個(gè)關(guān)鍵信息；所述N為大于1的整數(shù)，且NM；

所述服務(wù)器將存儲(chǔ)的多個(gè)關(guān)鍵信息，分別代入所述至少一個(gè)模板，得到P條數(shù)據(jù)；

所述服務(wù)器利用所述P條數(shù)據(jù)中的部分?jǐn)?shù)據(jù)進(jìn)行訓(xùn)練，得到數(shù)據(jù)標(biāo)注模型；

所述服務(wù)器利用所述數(shù)據(jù)標(biāo)注模型對(duì)所述M條數(shù)據(jù)除所述N條數(shù)據(jù)之外的數(shù)據(jù)進(jìn)行標(biāo)注。

2.如權(quán)利要求1所述的方法，其特征在于，在所述M條數(shù)據(jù)中抽取N條數(shù)據(jù)包括：

對(duì)所述M條數(shù)據(jù)進(jìn)行分類，得到Q類數(shù)據(jù)；所述Q為正整數(shù)；

從所述Q類數(shù)據(jù)中分別抽取部分?jǐn)?shù)據(jù)，得到所述N條數(shù)據(jù)。

3.如權(quán)利要求2所述的方法，其特征在于，對(duì)所述M條數(shù)據(jù)進(jìn)行分類，包括：

將所述M條數(shù)據(jù)分別轉(zhuǎn)換為各自對(duì)應(yīng)的特征向量，得到M個(gè)特征向量；

將所述M個(gè)特征向量中，特征向量相同或相近的特征向量對(duì)應(yīng)的數(shù)據(jù)作為一類數(shù)據(jù)。

4.如權(quán)利要求1至3任一項(xiàng)所述的方法，其特征在于，所述服務(wù)器利用所述P條數(shù)據(jù)中的部分?jǐn)?shù)據(jù)進(jìn)行訓(xùn)練，得到數(shù)據(jù)標(biāo)注模型，包括：

所述服務(wù)器利用所述P條數(shù)據(jù)中的部分?jǐn)?shù)據(jù)對(duì)預(yù)設(shè)的初始模型進(jìn)行訓(xùn)練，得到數(shù)據(jù)標(biāo)注模型。

5.如權(quán)利要求4所述的方法，其特征在于，所述服務(wù)器得到數(shù)據(jù)標(biāo)注模型之后，所述方法還包括：

所述服務(wù)器利用所述P條數(shù)據(jù)中除所述部分?jǐn)?shù)據(jù)之外的剩余數(shù)據(jù)，對(duì)所述數(shù)據(jù)標(biāo)注模型進(jìn)行校驗(yàn)。

6.一種數(shù)據(jù)標(biāo)注裝置，其特征在于，包括：

存儲(chǔ)器，用于存儲(chǔ)指令；

通信接口，用于接收和發(fā)送數(shù)據(jù)；

處理器，用于調(diào)用所述存儲(chǔ)器中的程序指令以執(zhí)行：

獲取待標(biāo)注的M條數(shù)據(jù)；所述M為大于1的整數(shù)；

在所述M條數(shù)據(jù)中抽取N條數(shù)據(jù)，并針對(duì)所述N條數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析得到至少一個(gè)模板；每個(gè)所述模板中包括至少一個(gè)槽位，每一個(gè)槽位用于填寫(xiě)至少一個(gè)關(guān)鍵信息；所述N為大于1的整數(shù)，且NM；

將存儲(chǔ)的多個(gè)關(guān)鍵信息，分別代入所述至少一個(gè)模板，得到P條數(shù)據(jù)；

利用所述P條數(shù)據(jù)中的部分?jǐn)?shù)據(jù)進(jìn)行訓(xùn)練，得到數(shù)據(jù)標(biāo)注模型；

利用所述數(shù)據(jù)標(biāo)注模型對(duì)所述M條數(shù)據(jù)除所述N條數(shù)據(jù)之外的數(shù)據(jù)進(jìn)行標(biāo)注。

7.如權(quán)利要求6所述的裝置，其特征在于，所述處理器執(zhí)行在所述M條數(shù)據(jù)中抽取N條數(shù)據(jù)，具體用于：

對(duì)所述M條數(shù)據(jù)進(jìn)行分類，得到Q類數(shù)據(jù)；所述Q為正整數(shù)；

從所述Q類數(shù)據(jù)中分別抽取部分?jǐn)?shù)據(jù)，得到所述N條數(shù)據(jù)。

8.如權(quán)利要求7所述的裝置，其特征在于，所述處理器執(zhí)行對(duì)所述M條數(shù)據(jù)進(jìn)行分類，具體用于：

將所述M條數(shù)據(jù)分別轉(zhuǎn)換為各自對(duì)應(yīng)的特征向量，得到M個(gè)特征向量；

將所述M個(gè)特征向量中，特征向量相同或相近的特征向量對(duì)應(yīng)的數(shù)據(jù)作為一類數(shù)據(jù)。

9.如權(quán)利要求6至8任一項(xiàng)所述的裝置，其特征在于，所述處理器執(zhí)行利用所述P條數(shù)據(jù)中的部分?jǐn)?shù)據(jù)進(jìn)行訓(xùn)練，得到數(shù)據(jù)標(biāo)注模型，具體用于：

利用所述P條數(shù)據(jù)中的部分?jǐn)?shù)據(jù)對(duì)預(yù)設(shè)的初始模型進(jìn)行訓(xùn)練，得到數(shù)據(jù)標(biāo)注模型。

10.如權(quán)利要求9所述的裝置，其特征在于，所述處理器執(zhí)行得到數(shù)據(jù)標(biāo)注模型之后，還用于執(zhí)行：

利用所述P條數(shù)據(jù)中除所述部分?jǐn)?shù)據(jù)之外的剩余數(shù)據(jù)，對(duì)所述數(shù)據(jù)標(biāo)注模型進(jìn)行校驗(yàn)。

11.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序包括程序指令，所述程序指令當(dāng)被計(jì)算機(jī)執(zhí)行時(shí)，使所述計(jì)算機(jī)執(zhí)行如權(quán)利要求1-5中任意一項(xiàng)所述的方法。

12.一種計(jì)算機(jī)程序產(chǎn)品，其特征在于，包括程序指令，所述程序指令當(dāng)被計(jì)算機(jī)執(zhí)行時(shí)，使所述計(jì)算機(jī)執(zhí)行如權(quán)利要求1-5中任意一項(xiàng)所述的方法。