[發(fā)明專利]一種數(shù)據(jù)流分類方法、裝置及系統(tǒng)在審
| 申請?zhí)枺?/td> | 201911183941.2 | 申請日: | 2019-11-27 |
| 公開(公告)號: | CN112861894A | 公開(公告)日: | 2021-05-28 |
| 發(fā)明(設(shè)計)人: | 趙禮菁;胡翔;杜靜波;馮張瀟 | 申請(專利權(quán))人: | 華為技術(shù)有限公司 |
| 主分類號: | G06K9/62 | 分類號: | G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 北京同達信恒知識產(chǎn)權(quán)代理有限公司 11291 | 代理人: | 張翠華 |
| 地址: | 518129 廣東*** | 國省代碼: | 廣東;44 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 數(shù)據(jù)流 分類 方法 裝置 系統(tǒng) | ||
1.一種數(shù)據(jù)流分類方法,其特征在于,包括:
根據(jù)業(yè)務(wù)感知SA特征庫對采集到的數(shù)據(jù)流進行分類得到采集到的數(shù)據(jù)流中的N個第一數(shù)據(jù)流分別所屬的類別,并確定所述采集到的數(shù)據(jù)流中M個第二數(shù)據(jù)流與SA特征庫中的特征規(guī)則不匹配,M和N為正整數(shù);
根據(jù)所述N個第一數(shù)據(jù)流分別所屬的類別對所述N個第一數(shù)據(jù)流進行標(biāo)簽標(biāo)注,并根據(jù)所述N個第一數(shù)據(jù)流以及所述N個第一數(shù)據(jù)流分別所標(biāo)注的標(biāo)簽對待訓(xùn)練模型進行訓(xùn)練得到分類模型;
根據(jù)所述分類模型對所述M個第二數(shù)據(jù)流進行分類得到所述M個第二數(shù)據(jù)流所屬的類別。
2.如權(quán)利要求1所述的方法,其特征在于,還包括:
獲取所述N個第一數(shù)據(jù)流中每個第一數(shù)據(jù)流所包括的字段的重要度,以及獲取所述M個第二數(shù)據(jù)流每個數(shù)據(jù)流所包括的字段的重要度,每個字段的重要度用于表征所述每個字段對所述每個字段所屬的數(shù)據(jù)流的分類結(jié)果產(chǎn)生影響的重要程度;
根據(jù)所述N個第一數(shù)據(jù)流和所述M個第二數(shù)據(jù)流中每個數(shù)據(jù)流包括的字段的重要度和所述每個數(shù)據(jù)流所屬的類別生成特征規(guī)則,所述特征規(guī)則用于更新所述SA特征庫。
3.如權(quán)利要求2所述的方法,其特征在于,根據(jù)所述N個第一數(shù)據(jù)流和所述M個第二數(shù)據(jù)流中每個數(shù)據(jù)流包括的字段的重要度和所述每個數(shù)據(jù)流所屬的類別生成特征規(guī)則,包括:
確定N個第一數(shù)據(jù)流中屬于第一類別的至少一個第一數(shù)據(jù)流中包括的K1個特征字段,所述K1個特征字段中每個特征字段的重要度大于所述至少一個第一數(shù)據(jù)流包括的字段中除所述K1個特征字段以外的其它字段;
確定M個第二數(shù)據(jù)流中屬于第一類別的至少一個第二數(shù)據(jù)流中包括的K2個特征字段,所述K2個特征字段中每個特征字段的重要度大于所述至少一個第二數(shù)據(jù)流包括的字段中除所述K2個特征字段以外的其它字段;K1和K2為正整數(shù);
根據(jù)所述K1個特征字段以及所述K2個特征字段生成所述第一類別對應(yīng)的特征規(guī)則。
4.如權(quán)利要求3所述的方法,其特征在于,根據(jù)所述K1個特征字段以及所述K2個特征字段生成所述第一類別對應(yīng)的特征規(guī)則,包括:
對K2個特征字段與所述K1個特征字段中重疊的至少一個特征字段進行關(guān)聯(lián)得到所述第一類別的特征規(guī)則。
5.如權(quán)利要求3或4所述的方法,其特征在于,所述K1個特征字段在所述N個第一數(shù)據(jù)流包括的除所述至少一個第一數(shù)據(jù)流以外的其它數(shù)據(jù)流中不存在;
所述K2個特征字段在所述M個第二數(shù)據(jù)流包括的除所述至少一個第二數(shù)據(jù)流以外的其它數(shù)據(jù)流中不存在。
6.如權(quán)利要求1-5任一項所述的方法,其特征在于,還包括:
獲得管理網(wǎng)元配置的可識別類別的范圍;
根據(jù)SA特征庫對采集到的數(shù)據(jù)流進行分類得到采集到的數(shù)據(jù)流中的N個第一數(shù)據(jù)流分別所屬的類別,位于所述可識別類別的范圍內(nèi)。
7.一種數(shù)據(jù)流分類裝置,其特征在于,包括:
預(yù)處理模塊,用于根據(jù)業(yè)務(wù)感知SA特征庫對采集到的數(shù)據(jù)流進行分類得到采集到的數(shù)據(jù)流中的N個第一數(shù)據(jù)流分別所屬的類別,并確定所述采集到的數(shù)據(jù)流中M個第二數(shù)據(jù)流與SA特征庫中的特征規(guī)則不匹配,M和N為正整數(shù);根據(jù)所述N個第一數(shù)據(jù)流分別所屬的類別對所述N個第一數(shù)據(jù)流進行標(biāo)簽標(biāo)注;
分類處理模塊,用于根據(jù)所述N個第一數(shù)據(jù)流以及所述N個第一數(shù)據(jù)流分別所標(biāo)注的標(biāo)簽對待訓(xùn)練模型進行訓(xùn)練得到分類模型;根據(jù)所述分類模型對所述M個第二數(shù)據(jù)流進行分類得到所述M個第二數(shù)據(jù)流所屬的類別。
8.如權(quán)利要求7所述的裝置,其特征在于,還包括:
規(guī)則提取模塊,用于獲取所述N個第一數(shù)據(jù)流中每個第一數(shù)據(jù)流所包括的字段的重要度,以及獲取所述M個第二數(shù)據(jù)流每個數(shù)據(jù)流所包括的字段的重要度,每個字段的重要度用于表征所述每個字段對所述每個字段所屬的數(shù)據(jù)流的分類結(jié)果產(chǎn)生影響的重要程度;根據(jù)所述N個第一數(shù)據(jù)流和所述M個第二數(shù)據(jù)流中每個數(shù)據(jù)流包括的字段的重要度和所述每個數(shù)據(jù)流所屬的類別生成特征規(guī)則,所述特征規(guī)則用于更新所述SA特征庫。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于華為技術(shù)有限公司,未經(jīng)華為技術(shù)有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201911183941.2/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06K 數(shù)據(jù)識別;數(shù)據(jù)表示;記錄載體;記錄載體的處理
G06K9-00 用于閱讀或識別印刷或書寫字符或者用于識別圖形,例如,指紋的方法或裝置
G06K9-03 .錯誤的檢測或校正,例如,用重復(fù)掃描圖形的方法
G06K9-18 .應(yīng)用具有附加代碼標(biāo)記或含有代碼標(biāo)記的打印字符的,例如,由不同形狀的各個筆畫組成的,而且每個筆畫表示不同的代碼值的字符
G06K9-20 .圖像捕獲
G06K9-36 .圖像預(yù)處理,即無須判定關(guān)于圖像的同一性而進行的圖像信息處理
G06K9-60 .圖像捕獲和多種預(yù)處理作用的組合
- 編碼裝置,編碼方法,程序和記錄媒體
- 網(wǎng)絡(luò)數(shù)據(jù)流識別系統(tǒng)及方法
- 一種數(shù)據(jù)流調(diào)度的方法、設(shè)備和系統(tǒng)
- 一種確定待清洗數(shù)據(jù)流的方法及裝置
- 用于分析儀器化軟件的數(shù)據(jù)流處理語言
- 用于數(shù)據(jù)流系統(tǒng)的數(shù)據(jù)流處理方法及裝置
- 數(shù)據(jù)流調(diào)度系統(tǒng)以及數(shù)據(jù)流調(diào)度方法
- 采用向量處理的同時分割
- 汽車數(shù)據(jù)流的監(jiān)控方法、系統(tǒng)及可讀存儲介質(zhì)
- 一種數(shù)據(jù)流類型識別模型更新方法及相關(guān)設(shè)備





