[發(fā)明專利]一種基于二叉樹結(jié)構(gòu)的不平衡數(shù)據(jù)處理方法在審
| 申請?zhí)枺?/td> | 201810320811.8 | 申請日: | 2018-04-11 |
| 公開(公告)號: | CN108920477A | 公開(公告)日: | 2018-11-30 |
| 發(fā)明(設(shè)計)人: | 胡勤生;梁亞玲;杜明輝 | 申請(專利權(quán))人: | 華南理工大學(xué) |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30;G06K9/62 |
| 代理公司: | 廣州市華學(xué)知識產(chǎn)權(quán)代理有限公司 44245 | 代理人: | 劉巧霞 |
| 地址: | 510640 廣*** | 國省代碼: | 廣東;44 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 負(fù)樣本 集合 二叉樹結(jié)構(gòu) 空間集合 正負(fù)樣本 數(shù)據(jù)處理 正樣本 歸一化處理 原始數(shù)據(jù)集 基分類器 聚類算法 特征差異 樣本集合 葉子節(jié)點(diǎn) 原始空間 不相交 二叉樹 數(shù)據(jù)集 分裂 方差 極差 副本 噪聲 樣本 抽樣 重復(fù) 平衡 創(chuàng)建 | ||
1.一種基于二叉樹結(jié)構(gòu)的不平衡數(shù)據(jù)集的處理方法,其特征在于,具體步驟包括:
(1)將原始數(shù)據(jù)集Ω按標(biāo)簽劃分為正樣本空間集合ΩP和負(fù)樣本空間集合ΩN,同時創(chuàng)建負(fù)樣本空間集合的副本CN;
(2)選擇每個平衡樣本集合的樣本平衡比r、選擇樹的深度D、葉子節(jié)點(diǎn)的最少樣本數(shù)量LeafMin以及基于原型聚類的基聚類算法Γ;
(3)采用步驟(2)中所選擇的基聚類算法Γ將負(fù)樣本集合CN劃分為2個不相交的簇Ci,i=1,2;
(4)根據(jù)分裂準(zhǔn)則,判斷步驟(3)中所劃分的簇,即CN←Ci,i=1,2是否滿足分裂準(zhǔn)則;若滿足分裂準(zhǔn)則,則對負(fù)樣本集合CN重復(fù)步驟(3)和步驟(4)直至當(dāng)前負(fù)樣本集合CN不再滿足分裂準(zhǔn)則;遞歸完畢后,形成二叉樹Τ;
(5)對步驟(4)得到的二叉樹葉子節(jié)點(diǎn)上的每個負(fù)樣本集合Θj進(jìn)行所有特征xnm(j)的歸一化處理,歸一化后求解特征差異度方差FeatureVar(k)和特征極差程度FeatureRange(k)兩個參數(shù);重復(fù)步驟(5)多次,根據(jù)特征差異度方差FeatureVar(k)和特征極差程度FeatureRange(k),挑選出最佳的負(fù)樣本集合
(6)對步驟(5)得到的最佳負(fù)樣本集合按照一定比例進(jìn)行抽樣,得到平衡負(fù)樣本集合Ψ;
(7)將原始空間中的正樣本集合ΩP與步驟(6)得到的平衡負(fù)樣本集合Ψ構(gòu)成一個平衡樣本集合Ωbalance。
2.根據(jù)權(quán)利要求1所述的一種基于二叉樹結(jié)構(gòu)的不平衡數(shù)據(jù)處理方法,其特征在于,步驟(1)中劃分后的正樣本空間集合大小為|ΩP|,負(fù)樣本空間集合大小為|ΩN|,且正、負(fù)樣本空間集合有如下關(guān)系:
3.根據(jù)權(quán)利要求1所述的一種基于二叉樹結(jié)構(gòu)的不平衡數(shù)據(jù)處理方法,其特征在于,在步驟(2)的選擇過程中,樹的深度和葉子節(jié)點(diǎn)的最少樣本數(shù)量須同時滿足D>0,LeafMin≥2;通過樹的深度D以及葉子節(jié)點(diǎn)最少樣本數(shù)量LeafMin來確定分裂準(zhǔn)則;當(dāng)當(dāng)前樹的深度以及葉子節(jié)點(diǎn)的最少樣本數(shù)量滿足D>0,LeafMin≥2時,繼續(xù)對節(jié)點(diǎn)進(jìn)行分裂。
4.根據(jù)權(quán)利要求1所述的一種基于二叉樹結(jié)構(gòu)的不平衡數(shù)據(jù)處理方法,其特征在于,步驟(4)中,形成二叉樹具體方法為:
將步驟(3)中得到的Ci,i=1,2先后記為CN,即CN←Ci,i=1,2;再根據(jù)分裂準(zhǔn)則D'<D,|CN|>=LeafMin判斷是否繼續(xù)分裂;若滿足分裂準(zhǔn)則,則對負(fù)樣本集合CN重復(fù)步驟(3)和步驟(4),直到當(dāng)前負(fù)樣本集合不再滿足分裂準(zhǔn)則;遞歸完畢后,最終所形成二叉樹為Τ,記二叉樹Τ上的葉子節(jié)點(diǎn)上的負(fù)樣本集合為Θj,j=1,2,.....S;葉子節(jié)點(diǎn)個數(shù)滿足0<m≤2D。
5.根據(jù)權(quán)利要求1所述的一種基于二叉樹結(jié)構(gòu)的不平衡數(shù)據(jù)處理方法,其特征在于,步驟(5)中進(jìn)行歸一化處理,具體為:
對每一個負(fù)樣本集合Θj進(jìn)行所有特征xnm(j)的歸一化處理,其中,j表示第j個負(fù)樣本集合,n表示負(fù)樣本集合中第n個樣本,m表示負(fù)樣本集合中第m個特征;
對于每個負(fù)樣本集合中的元素按照
其中,N(j)表示第j個負(fù)樣本集合Θj中樣本的個數(shù),M表示原始樣本空間的特征維度。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于華南理工大學(xué),未經(jīng)華南理工大學(xué)許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810320811.8/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 樣本權(quán)重分配方法、模型訓(xùn)練方法、電子設(shè)備及存儲介質(zhì)
- 生成人臉識別的負(fù)樣本的方法、裝置及計算機(jī)設(shè)備
- 一種基于負(fù)樣本數(shù)據(jù)價值重采樣的車牌檢測方法
- 基于偽負(fù)樣本的數(shù)據(jù)平衡方法及提高數(shù)據(jù)分類性能的方法
- 一種模型訓(xùn)練方法及裝置
- 負(fù)樣本篩選模型訓(xùn)練方法、數(shù)據(jù)篩選方法和數(shù)據(jù)匹配方法
- 商品推薦方法、裝置、系統(tǒng)、計算機(jī)設(shè)備及存儲介質(zhì)
- 一種面向推薦系統(tǒng)的負(fù)采樣方法、裝置和電子設(shè)備
- 目標(biāo)檢測器的優(yōu)化以及目標(biāo)檢測
- 一種音頻負(fù)樣本的生成方法及裝置
- 一種基于動態(tài)二叉樹的SVM多分類方法
- 地址池處理方法及裝置
- 一種基于二叉樹結(jié)構(gòu)的有限域乘法器
- 視頻編碼方法、視頻解碼方法、視頻編碼設(shè)備、視頻解碼設(shè)備以及程序
- 視頻編碼方法、視頻解碼方法、視頻編碼設(shè)備、視頻解碼設(shè)備以及程序
- 一種移動自組網(wǎng)下基于聚類樹的視頻共享方法
- 一種LTE系統(tǒng)PUCCH無線資源分配的方法
- 規(guī)則模型的安全性的確定方法、裝置和服務(wù)器
- 一種二叉樹數(shù)據(jù)結(jié)構(gòu)的可視化演變方法
- 一種用于對電能質(zhì)量信號數(shù)據(jù)處理的方法及系統(tǒng)
- 空間特性參數(shù)集合指示方法、用戶側(cè)設(shè)備和網(wǎng)絡(luò)側(cè)設(shè)備
- 候選PDCCH的優(yōu)先級確定及監(jiān)聽方法、裝置、存儲介質(zhì)、基站、終端
- 候選信道映射方法、裝置、基站、終端及存儲介質(zhì)
- 搜索空間集合組合和丟棄
- 空間數(shù)據(jù)邊界處理方法、裝置、計算機(jī)設(shè)備及存儲介質(zhì)
- 用于II型CSI增強(qiáng)的混合公共/獨(dú)立FD基
- 一種基于二維空間的最小封閉空間提取方法及裝置
- 用于規(guī)劃無人機(jī)路徑的方法和裝置
- 房源文本信息生成方法、裝置、電子設(shè)備和存儲介質(zhì)
- 相似項(xiàng)目推薦方法、裝置、設(shè)備及介質(zhì)





