[發(fā)明專利]一種內(nèi)容推薦方法、裝置及服務(wù)器

在審

• 申請(qǐng)?zhí)枺?/td>: 201910390223.6
• 申請(qǐng)日: 2019-05-10
• 公開（公告）號(hào): CN110111152A
• 公開（公告）日: 2019-08-09
• 發(fā)明（設(shè)計(jì)）人: 孔蓓蓓
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06Q30/02
• 分類號(hào): G06Q30/02
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 郝傳鑫;熊永強(qiáng)

1.一種內(nèi)容推薦方法，其特征在于，所述方法包括：

通過用戶終端的瀏覽界面向目標(biāo)用戶展示第一推薦內(nèi)容，所述第一推薦內(nèi)容包含至少一條推薦消息；

獲取所述目標(biāo)用戶在瀏覽過程中針對(duì)所述第一推薦內(nèi)容的反饋信息；

根據(jù)所述反饋信息、所述目標(biāo)用戶的特征信息和所述第一推薦內(nèi)容的特征信息對(duì)所述第一推薦內(nèi)容包含的推薦消息的數(shù)量進(jìn)行調(diào)整。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述通過用戶終端的瀏覽界面向目標(biāo)用戶展示第一推薦內(nèi)容之前，所述方法還包括：

獲取目標(biāo)用戶的特征信息；

利用第一深度強(qiáng)化學(xué)習(xí)DQN網(wǎng)絡(luò)和所述特征信息確定出第二推薦內(nèi)容；

利用第二DQN網(wǎng)絡(luò)和所述特征信息確定出第三推薦內(nèi)容；

根據(jù)所述第二推薦內(nèi)容和所述第三推薦內(nèi)容確定所述目標(biāo)用戶的第一推薦內(nèi)容。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述反饋信息、所述目標(biāo)用戶的特征信息和所述第一推薦內(nèi)容的特征信息對(duì)所述第一推薦內(nèi)容包含的推薦消息的數(shù)量進(jìn)行調(diào)整，包括：

獲取所述反饋信息對(duì)應(yīng)的上下文信息；

將所述反饋信息、所述目標(biāo)用戶的特征信息、所述第一推薦內(nèi)容的特征信息和所述上下文信息分別輸入所述第一DQN網(wǎng)絡(luò)和所述第二DQN網(wǎng)絡(luò)，以得到所述第一推薦內(nèi)容的預(yù)測(cè)獎(jiǎng)勵(lì)值；

根據(jù)所述預(yù)測(cè)獎(jiǎng)勵(lì)值對(duì)所述第一推薦內(nèi)容包含的推薦消息的數(shù)量進(jìn)行調(diào)整。

4.根據(jù)權(quán)利要求2或3所述的方法，其特征在于，所述獲取所述目標(biāo)用戶在瀏覽過程中針對(duì)所述第一推薦內(nèi)容的反饋信息，包括：

獲取所述目標(biāo)用戶在瀏覽過程中對(duì)所述第一推薦內(nèi)容中來自所述第二推薦內(nèi)容的推薦消息的第一反饋信息，以及對(duì)所述第一推薦內(nèi)容中來自所述第三推薦內(nèi)容的推薦消息的第二反饋信息；

將所述第一反饋信息和所述第二反饋信息作為所述目標(biāo)用戶在瀏覽過程中針對(duì)所述第一推薦內(nèi)容的反饋信息。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述方法還包括：

根據(jù)所述第一反饋信息和所述第二反饋信息確定所述第一DQN網(wǎng)絡(luò)的推薦效果和所述第二DQN網(wǎng)絡(luò)的推薦效果；

在所述第二DQN網(wǎng)絡(luò)的推薦效果優(yōu)于所述第一DQN網(wǎng)絡(luò)的推薦效果的情況下，根據(jù)所述第二DQN網(wǎng)絡(luò)的參數(shù)對(duì)所述第一DQN網(wǎng)絡(luò)的參數(shù)進(jìn)行調(diào)整。

6.根據(jù)權(quán)利要求2～5中任一項(xiàng)所述的方法，其特征在于，所述根據(jù)所述第二推薦內(nèi)容和所述第三推薦內(nèi)容確定所述目標(biāo)用戶的第一推薦內(nèi)容，包括：

從所述第二推薦內(nèi)容包括的推薦消息中選擇第一推薦消息；

從所述第三推薦內(nèi)容包括的推薦消息中選擇第二推薦消息；

將所述第一推薦消息和所述第二推薦消息作為所述目標(biāo)用戶的第一推薦內(nèi)容。

7.根據(jù)權(quán)利要求1～6中任一項(xiàng)所述的方法，其特征在于，所述反饋信息包括點(diǎn)擊次數(shù)、訪問深度、訪問時(shí)長(zhǎng)和刷新頻率中的一種或多種。

8.一種內(nèi)容推薦裝置，其特征在于，包括：

展示模塊，用于通過用戶終端的瀏覽界面向目標(biāo)用戶展示第一推薦內(nèi)容，所述第一推薦內(nèi)容包含至少一條推薦消息；

獲取模塊，用于獲取所述目標(biāo)用戶在瀏覽過程中針對(duì)所述第一推薦內(nèi)容的反饋信息；

處理模塊，用于根據(jù)所述反饋信息、所述目標(biāo)用戶的特征信息和所述第一推薦內(nèi)容的特征信息對(duì)所述第一推薦內(nèi)容包含的推薦消息的數(shù)量進(jìn)行調(diào)整。

9.一種服務(wù)器，其特征在于，包括處理器、網(wǎng)絡(luò)接口和存儲(chǔ)裝置，所述處理器、所述網(wǎng)絡(luò)接口和所述存儲(chǔ)裝置相互連接，其中，所述網(wǎng)絡(luò)接口受所述處理器的控制用于收發(fā)數(shù)據(jù)，所述存儲(chǔ)裝置用于存儲(chǔ)計(jì)算機(jī)程序，所述計(jì)算機(jī)程序包括程序指令，所述處理器被配置用于調(diào)用所述程序指令，執(zhí)行如權(quán)利要求1～7中任一項(xiàng)所述的內(nèi)容推薦方法。

10.一種計(jì)算機(jī)存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)存儲(chǔ)介質(zhì)中存儲(chǔ)有程序指令，所述程序指令被執(zhí)行時(shí)，用于執(zhí)行如權(quán)利要求1～7中任一項(xiàng)所述的內(nèi)容推薦方法。