[發(fā)明專利]一種數(shù)據(jù)處理方法、裝置及設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202010611544.7
• 申請(qǐng)日: 2020-06-29
• 公開(kāi)（公告）號(hào): CN111783997A
• 公開(kāi)（公告）日: 2020-10-16
• 發(fā)明（設(shè)計(jì)）人: 郭階添
• 申請(qǐng)（專利權(quán)）人: 杭州?？低晹?shù)字技術(shù)股份有限公司
• 主分類號(hào): G06N20/00
• 分類號(hào): G06N20/00;G06N3/04;G06N3/08
• 代理公司: 北京博思佳知識(shí)產(chǎn)權(quán)代理有限公司 11415
• 代理人: 楊春香

1.一種數(shù)據(jù)處理方法，其特征在于，應(yīng)用于終端設(shè)備，所述方法包括：

獲取初始基線模型；

通過(guò)所述初始基線模型對(duì)所述終端設(shè)備當(dāng)前獲得的流式數(shù)據(jù)進(jìn)行處理，得到與所述流式數(shù)據(jù)對(duì)應(yīng)的訓(xùn)練數(shù)據(jù)；其中，所述訓(xùn)練數(shù)據(jù)包括與所述流式數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)特征，及所述數(shù)據(jù)特征對(duì)應(yīng)的標(biāo)簽信息；

通過(guò)所述訓(xùn)練數(shù)據(jù)對(duì)初始基線模型進(jìn)行訓(xùn)練，得到訓(xùn)練后的目標(biāo)基線模型；

在所述終端設(shè)備部署所述初始基線模型或所述目標(biāo)基線模型，以通過(guò)所述初始基線模型或所述目標(biāo)基線模型對(duì)所述終端設(shè)備的應(yīng)用數(shù)據(jù)進(jìn)行處理。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述初始基線模型包括第一子網(wǎng)絡(luò)模型，所述第一子網(wǎng)絡(luò)模型是用于生成標(biāo)簽信息的網(wǎng)絡(luò)模型；

所述通過(guò)所述初始基線模型對(duì)所述終端設(shè)備當(dāng)前獲得的流式數(shù)據(jù)進(jìn)行處理，得到與所述流式數(shù)據(jù)對(duì)應(yīng)的訓(xùn)練數(shù)據(jù)，包括：

將所述流式數(shù)據(jù)輸入給所述第一子網(wǎng)絡(luò)模型，通過(guò)所述第一子網(wǎng)絡(luò)模型對(duì)所述流式數(shù)據(jù)進(jìn)行處理，得到與所述流式數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)特征；

通過(guò)所述第一子網(wǎng)絡(luò)模型生成所述數(shù)據(jù)特征對(duì)應(yīng)的標(biāo)簽信息；

基于所述數(shù)據(jù)特征和所述標(biāo)簽信息生成所述訓(xùn)練數(shù)據(jù)。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述初始基線模型包括第二子網(wǎng)絡(luò)模型，所述第二子網(wǎng)絡(luò)模型是需要進(jìn)行增量訓(xùn)練的網(wǎng)絡(luò)模型；所述通過(guò)所述訓(xùn)練數(shù)據(jù)對(duì)初始基線模型進(jìn)行訓(xùn)練，得到訓(xùn)練后的目標(biāo)基線模型，包括：

將所述訓(xùn)練數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)緩存隊(duì)列；

在數(shù)據(jù)緩存隊(duì)列中的訓(xùn)練數(shù)據(jù)數(shù)量達(dá)到預(yù)設(shè)閾值時(shí)，將數(shù)據(jù)緩存隊(duì)列中的訓(xùn)練數(shù)據(jù)輸入給所述第二子網(wǎng)絡(luò)模型，通過(guò)所述數(shù)據(jù)緩存隊(duì)列中的訓(xùn)練數(shù)據(jù)對(duì)所述第二子網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練，得到訓(xùn)練后的第二子網(wǎng)絡(luò)模型；

基于訓(xùn)練后的第二子網(wǎng)絡(luò)模型獲取所述目標(biāo)基線模型；其中，所述目標(biāo)基線模型包括所述訓(xùn)練后的第二子網(wǎng)絡(luò)模型。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述初始基線模型包括第一子網(wǎng)絡(luò)模型，所述基于訓(xùn)練后的第二子網(wǎng)絡(luò)模型獲取所述目標(biāo)基線模型，包括：

將所述第一子網(wǎng)絡(luò)模型和所述訓(xùn)練后的第二子網(wǎng)絡(luò)模型組合在一起，得到所述目標(biāo)基線模型；或者，

通過(guò)所述數(shù)據(jù)緩存隊(duì)列中的訓(xùn)練數(shù)據(jù)對(duì)所述第一子網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練，得到訓(xùn)練后的第一子網(wǎng)絡(luò)模型；將所述訓(xùn)練后的第一子網(wǎng)絡(luò)模型和所述訓(xùn)練后的第二子網(wǎng)絡(luò)模型組合在一起，得到所述目標(biāo)基線模型。

5.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述第二子網(wǎng)絡(luò)模型包括至少一個(gè)網(wǎng)絡(luò)層，所述通過(guò)所述數(shù)據(jù)緩存隊(duì)列中的訓(xùn)練數(shù)據(jù)對(duì)所述第二子網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練，得到訓(xùn)練后的第二子網(wǎng)絡(luò)模型，包括：

針對(duì)所述第二子網(wǎng)絡(luò)模型的每個(gè)網(wǎng)絡(luò)層，通過(guò)所述網(wǎng)絡(luò)層對(duì)輸入數(shù)據(jù)進(jìn)行處理，得到初始輸出數(shù)據(jù)，并將所述初始輸出數(shù)據(jù)劃分為至少兩個(gè)初始子矩陣；對(duì)每個(gè)初始子矩陣進(jìn)行歸一化處理，得到與所述初始子矩陣對(duì)應(yīng)的目標(biāo)子矩陣，并根據(jù)得到的所有目標(biāo)子矩陣生成所述網(wǎng)絡(luò)層的目標(biāo)輸出數(shù)據(jù)；

其中，所述數(shù)據(jù)緩存隊(duì)列中的訓(xùn)練數(shù)據(jù)作為所述第二子網(wǎng)絡(luò)模型的第一個(gè)網(wǎng)絡(luò)層的輸入數(shù)據(jù)，每個(gè)網(wǎng)絡(luò)層的目標(biāo)輸出數(shù)據(jù)作為本網(wǎng)絡(luò)層的下一個(gè)網(wǎng)絡(luò)層的輸入數(shù)據(jù)；最后一個(gè)網(wǎng)絡(luò)層的目標(biāo)輸出數(shù)據(jù)用于對(duì)所述第二子網(wǎng)絡(luò)模型的網(wǎng)絡(luò)參數(shù)進(jìn)行調(diào)整，得到訓(xùn)練后的第二子網(wǎng)絡(luò)模型。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述初始基線模型包括第三子網(wǎng)絡(luò)模型，所述第三子網(wǎng)絡(luò)模型是用于對(duì)訓(xùn)練數(shù)據(jù)評(píng)分的網(wǎng)絡(luò)模型；所述通過(guò)所述訓(xùn)練數(shù)據(jù)對(duì)初始基線模型進(jìn)行訓(xùn)練，得到訓(xùn)練后的目標(biāo)基線模型，包括：

將所述訓(xùn)練數(shù)據(jù)輸入給第三子網(wǎng)絡(luò)模型，通過(guò)所述第三子網(wǎng)絡(luò)模型確定所述訓(xùn)練數(shù)據(jù)的分?jǐn)?shù)值；其中，所述分?jǐn)?shù)值越高，所述訓(xùn)練數(shù)據(jù)的訓(xùn)練效果越好；

若所述訓(xùn)練數(shù)據(jù)的分?jǐn)?shù)值大于或者等于預(yù)設(shè)的分?jǐn)?shù)閾值，則通過(guò)所述訓(xùn)練數(shù)據(jù)對(duì)初始基線模型進(jìn)行訓(xùn)練，得到訓(xùn)練后的目標(biāo)基線模型。