[發(fā)明專利]一種訓(xùn)練數(shù)據(jù)的處理方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201510362416.2
• 申請(qǐng)日: 2015-06-26
• 公開(kāi)（公告）號(hào): CN105005588B
• 公開(kāi)（公告）日: 2018-04-20
• 發(fā)明（設(shè)計(jì)）人: 李超
• 申請(qǐng)（專利權(quán)）人: 深圳市騰訊計(jì)算機(jī)系統(tǒng)有限公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30
• 代理公司: 深圳翼盛智成知識(shí)產(chǎn)權(quán)事務(wù)所(普通合伙)44300
• 代理人: 黃威

1.一種訓(xùn)練數(shù)據(jù)的處理方法，其特征在于，包括：

獲取訓(xùn)練數(shù)據(jù)，并確定所述訓(xùn)練數(shù)據(jù)的原始特征空間，所述原始特征空間為訓(xùn)練數(shù)據(jù)原始的特征數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)；

對(duì)所述原始特征空間進(jìn)行掃描統(tǒng)計(jì)，以確定在原始特征空間內(nèi)實(shí)際存儲(chǔ)有特征數(shù)據(jù)的位置；

統(tǒng)計(jì)所述位置的數(shù)量，并根據(jù)所述數(shù)量確定實(shí)際特征空間的長(zhǎng)度；

根據(jù)所述實(shí)際特征空間的長(zhǎng)度設(shè)定實(shí)際特征空間的特征序號(hào)；

獲取原始特征空間中預(yù)設(shè)的特征序號(hào)，建立所述原始特征空間中預(yù)設(shè)的特征序號(hào)與實(shí)際特征空間的特征序號(hào)的映射關(guān)系，得到全局索引；

根據(jù)所述全局索引將所述訓(xùn)練數(shù)據(jù)映射到實(shí)際特征空間，所述實(shí)際特征空間為根據(jù)在原始特征空間內(nèi)實(shí)際存儲(chǔ)有特征數(shù)據(jù)的位置而構(gòu)成的存儲(chǔ)結(jié)構(gòu)；

根據(jù)所述全局索引，將預(yù)置的稀疏邏輯回歸模型轉(zhuǎn)換為稠密邏輯回歸模型；

基于所述稠密邏輯回歸模型，利用實(shí)際特征空間的訓(xùn)練數(shù)據(jù)進(jìn)行模型迭代訓(xùn)練，得到迭代后的稠密邏輯回歸模型。

2.根據(jù)權(quán)利要求1所述的訓(xùn)練數(shù)據(jù)的處理方法，其特征在于，所述基于所述稠密邏輯回歸模型，利用實(shí)際特征空間的訓(xùn)練數(shù)據(jù)進(jìn)行模型迭代訓(xùn)練，得到迭代后的稠密邏輯回歸模型之后，還包括：

根據(jù)所述全局索引，將所述迭代后的稠密邏輯回歸模型轉(zhuǎn)換為對(duì)應(yīng)的迭代后的稀疏邏輯回歸模型；

基于所述迭代后的稀疏邏輯回歸模型對(duì)推廣信息的點(diǎn)擊率進(jìn)行預(yù)估。

3.一種訓(xùn)練數(shù)據(jù)的處理裝置，其特征在于，包括：

獲取單元，用于獲取訓(xùn)練數(shù)據(jù)，并確定所述訓(xùn)練數(shù)據(jù)的原始特征空間，所述原始特征空間為訓(xùn)練數(shù)據(jù)原始的特征數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)；

索引建立單元，包括確定子單元、構(gòu)建子單元以及建立子單元，其中，所述確定子單元，用于對(duì)所述原始特征空間進(jìn)行掃描統(tǒng)計(jì)，以確定在原始特征空間內(nèi)實(shí)際存儲(chǔ)有特征數(shù)據(jù)的位置；

所述構(gòu)建子單元，用于統(tǒng)計(jì)所述位置的數(shù)量，并根據(jù)所述數(shù)量確定實(shí)際特征空間的長(zhǎng)度，根據(jù)所述實(shí)際特征空間的長(zhǎng)度設(shè)定實(shí)際特征空間的特征序號(hào)；

所述建立子單元，用于獲取原始特征空間中預(yù)設(shè)的特征序號(hào)，建立所述原始特征空間中預(yù)設(shè)的特征序號(hào)與實(shí)際特征空間的特征序號(hào)的映射關(guān)系，得到全局索引；

映射單元，用于根據(jù)所述全局索引將所述訓(xùn)練數(shù)據(jù)映射到實(shí)際特征空間，所述實(shí)際特征空間為根據(jù)在原始特征空間內(nèi)實(shí)際存儲(chǔ)有特征數(shù)據(jù)的位置而構(gòu)成的存儲(chǔ)結(jié)構(gòu)；

訓(xùn)練單元，用于根據(jù)所述全局索引，將預(yù)置的稀疏邏輯回歸模型轉(zhuǎn)換為稠密邏輯回歸模型；基于所述稠密邏輯回歸模型，利用實(shí)際特征空間的訓(xùn)練數(shù)據(jù)進(jìn)行模型迭代訓(xùn)練，得到迭代后的稠密邏輯回歸模型。

4.根據(jù)權(quán)利要求3所述的訓(xùn)練數(shù)據(jù)的處理裝置，其特征在于，所述裝置還包括：

轉(zhuǎn)換單元，用于根據(jù)所述全局索引，將所述迭代后的稠密邏輯回歸模型轉(zhuǎn)換為對(duì)應(yīng)的迭代后的稀疏邏輯回歸模型；

點(diǎn)擊率預(yù)估單元，用于基于所述迭代后的稀疏邏輯回歸模型對(duì)推廣信息的點(diǎn)擊率進(jìn)行預(yù)估。