[發明專利]數據清理模型構建方法、數據清理方法及相關設備、介質在審
| 申請號: | 202110774567.4 | 申請日: | 2021-07-08 |
| 公開(公告)號: | CN113609031A | 公開(公告)日: | 2021-11-05 |
| 發明(設計)人: | 付玉鑫 | 申請(專利權)人: | 深圳市晨北科技有限公司 |
| 主分類號: | G06F12/0891 | 分類號: | G06F12/0891;G06K9/62 |
| 代理公司: | 深圳中細軟知識產權代理有限公司 44528 | 代理人: | 袁文英 |
| 地址: | 518000 廣東省深圳市中山園*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據 清理 模型 構建 方法 相關 設備 介質 | ||
1.一種數據清理模型構建方法,其特征在于,包括:
獲取目標緩存類別對應的訓練樣本集,所述訓練樣本集包括屬于所述目標緩存類別的多個緩存數據的樣本信息,每個緩存數據的樣本信息包括清理標識和多個特征信息,所述多個特征信息分別為預設的多個緩存特征各自對應的特征信息,所述清理標識用于指示與所述每個緩存數據對應的清理類別;
基于所述多個緩存數據在第一緩存特征下的特征信息,和所述多個緩存數據各自對應的清理標識,確定目標情形下的判斷準確度,所述第一緩存特征為所述多個緩存特征中的任一緩存特征,所述目標情形是指以所述第一緩存特征作為判斷標準,判斷所述多個緩存數據各自對應的清理類別的情形;
根據多個情形下的判斷準確度,構建緩存數據清理模型,所述多個情形為以所述多個緩存特征分別作為判斷標準判斷所述多個緩存數據各自對應的清理類別的情形,所述緩存數據清理模型為依次以所述多個緩存特征作為判斷標準,判斷緩存數據的清理類別的決策樹,其中,判斷準確度高的緩存特征在所述決策樹中為判斷準確度低的緩存特征的父節點,且所述判斷準確度低的緩存特征連接在所述判斷準確度高的緩存特征的第一分支上,所述第一分支為判斷結果為不清理的分支。
2.根據權利要求1所述的方法,其特征在于,所述基于所述多個緩存數據在第一緩存特征下的特征信息,和所述多個緩存數據各自對應的清理標識,確定目標情形下的判斷準確度,包括:
根據所述多個緩存數據各自對應的清理標識,確定有關于清理標識的第一信息熵;
根據所述多個緩存數據在所述第一緩存特征下的特征信息,和所述多個緩存數據各自對應的清理標識,確定所述第一緩存特征的條件熵;
根據所述第一信息熵與所述條件熵,計算得到所述第一緩存特征的信息增益,以用于指示所述目標情形下的判斷準確度。
3.根據權利要求1所述的方法,其特征在于,所述基于所述多個緩存數據在第一緩存特征下的特征信息,和所述多個緩存數據各自對應的清理標識,確定目標情形下的判斷準確度,包括:
根據所述多個緩存數據各自對應的清理標識,確定有關于清理標識的第一信息熵;
根據所述多個緩存數據在所述第一緩存特征下的特征信息,和所述多個緩存數據各自對應的清理標識,確定所述第一緩存特征的條件熵;
根據所述第一信息熵與所述條件熵,計算得到所述第一緩存特征的信息增益;
根據所述多個緩存數據在所述第一緩存特征下的特征信息,確定所述有關于所述第一緩存特征的第二信息熵;
根據所述信息增益與所述第二信息熵,計算得到所述第一緩存特征的信息增益比,以用于指示所述目標情形下的判斷準確度。
4.根據權利要求1所述的方法,其特征在于,所述基于所述多個緩存數據在第一緩存特征下的特征信息,和所述多個緩存數據各自對應的清理標識,確定目標情形下的判斷準確度,包括:
根據所述多個緩存數據各自對應的清理標識,分別確定在所述第一緩存特征下的各類特征信息上的清理標識概率分布;
根據所述清理標識概率分布,和所述多個緩存數據在所述第一緩存特征下的特征信息,確定所述第一緩存特征的最小基尼指數,以用于指示所述目標情形下的判斷準確度。
5.根據權利要求1-4任一項所述的方法,其特征在于,所述獲取目標緩存類別對應的訓練樣本集,包括:
獲取屬于所述目標緩存類別的多個緩存數據,并確定所述多個緩存數據分別在所述多個緩存特征下的特征信息;
根據第一緩存數據在第一緩存特征下的特征信息,和所述第一緩存特征對應的預設標識處理規則,確定所述第一緩存數據在所述第一緩存特征下的子清理標識,以得到所述第一緩存數據對應的多個子清理標識,所述第一緩存數據為所述多個緩存數據中的任一緩存數據,所述第一緩存特征為所述多個緩存特征中的任一緩存特征,所述預設標識處理規則是指基于特征信息判斷緩存數據的清理類別的處理規則,所述第一緩存數據在所述第一緩存特征下的子清理標識用于指示在所述第一緩存特征下所述第一緩存數據對應的清理類別;
根據所述第一緩存數據對應的多個子清理標識,確定所述第一緩存數據對應的清理標識,以得到所述多個緩存數據各自對應的清理標識。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于深圳市晨北科技有限公司,未經深圳市晨北科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110774567.4/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種矩形物料的打包系統及其工作方法
- 下一篇:一種金屬磁粉芯及其制備方法
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





