[發(fā)明專利]數(shù)據(jù)處理的方法、裝置、存儲介質(zhì)及電子設(shè)備在審
| 申請?zhí)枺?/td> | 202010003252.5 | 申請日: | 2020-01-02 |
| 公開(公告)號: | CN111191731A | 公開(公告)日: | 2020-05-22 |
| 發(fā)明(設(shè)計)人: | 付小勇 | 申請(專利權(quán))人: | 同盾控股有限公司 |
| 主分類號: | G06K9/62 | 分類號: | G06K9/62 |
| 代理公司: | 北京律智知識產(chǎn)權(quán)代理有限公司 11438 | 代理人: | 孫寶海;袁禮君 |
| 地址: | 311121 浙江省杭州市余*** | 國省代碼: | 浙江;33 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 數(shù)據(jù)處理 方法 裝置 存儲 介質(zhì) 電子設(shè)備 | ||
1.一種數(shù)據(jù)處理的方法,其特征在于,所述方法包括:
基于樣本數(shù)據(jù)的柯爾莫可洛夫-斯米洛夫KS值確定備選分界點集合;
基于分箱組數(shù)以及分箱的信息值IV從所述備選分界點集合中確定目標(biāo)分界點;
獲取所述樣本數(shù)據(jù)基于所述目標(biāo)分界點的分箱結(jié)果;
基于所述分箱結(jié)果對模型進行訓(xùn)練。
2.如權(quán)利要求1所述的方法,其特征在于,基于所述樣本數(shù)據(jù)的KS值確定備選分界點集合,包括:
基于所述樣本數(shù)據(jù)的KS值對所述樣本數(shù)據(jù)進行循環(huán)分箱,基于滿足預(yù)設(shè)條件的分箱結(jié)果確定備選分界點集合。
3.如權(quán)利要求2所述的方法,其特征在于,基于所述樣本數(shù)據(jù)的KS值對所述樣本數(shù)據(jù)進行循環(huán)分箱,基于滿足預(yù)設(shè)條件的分箱結(jié)果確定備選分界點集合,包括:
獲取所述樣本數(shù)據(jù)的分箱結(jié)果;
判斷所述分箱結(jié)果是否滿足所述預(yù)設(shè)條件;
若判斷結(jié)果為否,基于所述分箱結(jié)果的KS值進行分箱,更新所述樣本數(shù)據(jù)的分箱結(jié)果;
若判斷結(jié)果為是,基于所述分箱結(jié)果確定備選分界點集合。
4.如權(quán)利要求3所述的方法,其特征在于,獲取所述樣本數(shù)據(jù)的分箱結(jié)果,包括:獲取更新后的所述樣本數(shù)據(jù)的分箱結(jié)果,以及獲取所述樣本數(shù)據(jù)的初始分箱結(jié)果;
其中,獲取所述樣本數(shù)據(jù)的初始分箱結(jié)果,包括:
計算所述樣本數(shù)據(jù)的KS值,基于所述KS值將所述樣本數(shù)據(jù)分箱,以獲取所述樣本數(shù)據(jù)的初始分箱結(jié)果。
5.如權(quán)利要求1所述的方法,其特征在于,基于分箱組數(shù)以及分箱的信息值IV從所述備選分界點集合中確定目標(biāo)分界點,包括:
從所述備選分界點集合確定所有滿足所述分箱組數(shù)的分界點組合;
計算每個分界點組合的IV,并基于IV值最大對應(yīng)的分界點組合確定目標(biāo)分界點。
6.如權(quán)利要求1所述的方法,其特征在于,所述方法還包括:
判斷所述目標(biāo)分界點對應(yīng)的各分箱結(jié)果內(nèi)是否存在樣本數(shù)據(jù)的數(shù)目是否小于第一閾值的分箱結(jié)果;
若判斷結(jié)果為是,從所述目標(biāo)分界點中去除掉分箱結(jié)果內(nèi)的樣本數(shù)據(jù)的數(shù)目小于數(shù)目閾值的分箱結(jié)果對應(yīng)的目標(biāo)分界點。
7.如權(quán)利要求1-6任意一項所述的方法,其特征在于,預(yù)設(shè)條件包括:分箱組數(shù)達到組數(shù)閾值以及分箱結(jié)果內(nèi)的樣本數(shù)據(jù)的數(shù)目小于第二閾值中的至少一個。
8.一種數(shù)據(jù)處理的裝置,其特征在于,所述裝置包括:
第一確定模塊,配置為基于樣本數(shù)據(jù)的柯爾莫可洛夫-斯米洛夫KS值確定備選分界點集合;
第二確定模塊,配置為基于分箱組數(shù)以及分箱的信息值IV從所述備選分界點集合中確定目標(biāo)分界點;
獲取模塊,配置為獲取所述樣本數(shù)據(jù)基于所述目標(biāo)分界點的分箱結(jié)果;
訓(xùn)練模塊,配置為基于所述分箱結(jié)果對模型進行訓(xùn)練。
9.一種電子設(shè)備,其特征在于,包括:
一個或多個處理器;
存儲裝置,用于存儲一個或多個程序;
當(dāng)所述一個或多個程序被所述一個或多個處理器執(zhí)行,使得所述一個或多個處理器實現(xiàn)如權(quán)利要求1-7中任一所述的方法。
10.一種計算機可讀介質(zhì),其上存儲有計算機程序,其特征在于,所述程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1-7中任一所述的方法。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于同盾控股有限公司,未經(jīng)同盾控股有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202010003252.5/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06K 數(shù)據(jù)識別;數(shù)據(jù)表示;記錄載體;記錄載體的處理
G06K9-00 用于閱讀或識別印刷或書寫字符或者用于識別圖形,例如,指紋的方法或裝置
G06K9-03 .錯誤的檢測或校正,例如,用重復(fù)掃描圖形的方法
G06K9-18 .應(yīng)用具有附加代碼標(biāo)記或含有代碼標(biāo)記的打印字符的,例如,由不同形狀的各個筆畫組成的,而且每個筆畫表示不同的代碼值的字符
G06K9-20 .圖像捕獲
G06K9-36 .圖像預(yù)處理,即無須判定關(guān)于圖像的同一性而進行的圖像信息處理
G06K9-60 .圖像捕獲和多種預(yù)處理作用的組合
- 數(shù)據(jù)處理設(shè)備,數(shù)據(jù)處理方法,和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理電路、數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法、數(shù)據(jù)處理控制方法
- 數(shù)據(jù)處理設(shè)備、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法及計算機可讀取的記錄介質(zhì)
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法以及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法以及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序





