[發(fā)明專利]數(shù)據(jù)處理方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011251902.4
• 申請(qǐng)日: 2020-11-11
• 公開(kāi)（公告）號(hào): CN112347355A
• 公開(kāi)（公告）日: 2021-02-09
• 發(fā)明（設(shè)計(jì)）人: 饒慧林;黃志濠
• 申請(qǐng)（專利權(quán)）人: 廣州酷狗計(jì)算機(jī)科技有限公司
• 主分類號(hào): G06F16/9535
• 分類號(hào): G06F16/9535;G06F16/2455;G06F16/28
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 郭翱杰

本申請(qǐng)?zhí)峁┝艘环N數(shù)據(jù)處理方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)，屬于大數(shù)據(jù)技術(shù)領(lǐng)域。該方法包括：基于數(shù)據(jù)倉(cāng)庫(kù)中的任一用戶標(biāo)識(shí)對(duì)應(yīng)的多個(gè)第一歷史行為數(shù)據(jù)中的多個(gè)第一內(nèi)容標(biāo)識(shí)，生成第一位數(shù)組，每個(gè)第一內(nèi)容標(biāo)識(shí)分別對(duì)應(yīng)該第一位數(shù)組中的多個(gè)位；存儲(chǔ)該任一用戶標(biāo)識(shí)以及該第一位數(shù)組的對(duì)應(yīng)關(guān)系；響應(yīng)于過(guò)濾請(qǐng)求，基于所存儲(chǔ)的用戶標(biāo)識(shí)與位數(shù)組的對(duì)應(yīng)關(guān)系，確定該過(guò)濾請(qǐng)求攜帶的用戶標(biāo)識(shí)對(duì)應(yīng)的目標(biāo)位數(shù)組；基于該目標(biāo)位數(shù)組，確定對(duì)該過(guò)濾請(qǐng)求攜帶的內(nèi)容標(biāo)識(shí)的過(guò)濾結(jié)果。本申請(qǐng)由二進(jìn)制的位數(shù)組來(lái)對(duì)大量的內(nèi)容標(biāo)識(shí)進(jìn)行表示，通過(guò)存儲(chǔ)位數(shù)組來(lái)支持過(guò)濾服務(wù)，能夠極大地減少為支持過(guò)濾服務(wù)而占用的存儲(chǔ)空間，提高存儲(chǔ)空間的利用率。

技術(shù)領(lǐng)域

本申請(qǐng)涉及大數(shù)據(jù)技術(shù)領(lǐng)域，特別涉及一種數(shù)據(jù)處理方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)。

背景技術(shù)

在一些場(chǎng)景中，為了向用戶提供更好的服務(wù)，存在基于海量數(shù)據(jù)的過(guò)濾需求。例如，在向用戶進(jìn)行內(nèi)容推薦的場(chǎng)景中，需要從候選內(nèi)容中過(guò)濾掉已向該用戶推薦的內(nèi)容，再?gòu)氖Ｓ嗟暮蜻x內(nèi)容中確定出向該用戶推薦的內(nèi)容。

相關(guān)技術(shù)中，會(huì)預(yù)先對(duì)應(yīng)存儲(chǔ)用戶標(biāo)識(shí)和已推薦內(nèi)容的內(nèi)容標(biāo)識(shí)，從而能夠根據(jù)已存儲(chǔ)的用戶標(biāo)識(shí)與已推薦內(nèi)容的內(nèi)容標(biāo)識(shí)的對(duì)應(yīng)關(guān)系，確定出已推薦內(nèi)容，進(jìn)而對(duì)已推薦內(nèi)容進(jìn)行過(guò)濾。

由于內(nèi)容標(biāo)識(shí)通常為字符串的格式，在內(nèi)容標(biāo)識(shí)的存儲(chǔ)數(shù)量很多的情況下，直接存儲(chǔ)內(nèi)容標(biāo)識(shí)會(huì)占用巨大的存儲(chǔ)空間，導(dǎo)致存儲(chǔ)空間的利用率較低。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種數(shù)據(jù)處理方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)，能夠提高存儲(chǔ)空間的利用率。所述技術(shù)方案如下：

根據(jù)本申請(qǐng)實(shí)施例的一方面，提供了一種數(shù)據(jù)處理方法，所述方法包括：

基于數(shù)據(jù)倉(cāng)庫(kù)中的任一用戶標(biāo)識(shí)對(duì)應(yīng)的多個(gè)第一歷史行為數(shù)據(jù)中的多個(gè)第一內(nèi)容標(biāo)識(shí)，生成第一位數(shù)組，其中，所述第一歷史行為數(shù)據(jù)用于記錄被執(zhí)行交互行為的內(nèi)容，每個(gè)所述第一內(nèi)容標(biāo)識(shí)分別對(duì)應(yīng)所述第一位數(shù)組中的多個(gè)位；

存儲(chǔ)所述任一用戶標(biāo)識(shí)以及所述第一位數(shù)組的對(duì)應(yīng)關(guān)系；

響應(yīng)于過(guò)濾請(qǐng)求，基于所存儲(chǔ)的用戶標(biāo)識(shí)與位數(shù)組的對(duì)應(yīng)關(guān)系，確定所述過(guò)濾請(qǐng)求攜帶的用戶標(biāo)識(shí)對(duì)應(yīng)的目標(biāo)位數(shù)組；

基于所述目標(biāo)位數(shù)組，確定對(duì)所述過(guò)濾請(qǐng)求攜帶的內(nèi)容標(biāo)識(shí)的過(guò)濾結(jié)果。

在一種可選的實(shí)現(xiàn)方式中，所述基于數(shù)據(jù)倉(cāng)庫(kù)中的任一用戶標(biāo)識(shí)對(duì)應(yīng)的多個(gè)第一歷史行為數(shù)據(jù)中的多個(gè)第一內(nèi)容標(biāo)識(shí)，生成第一位數(shù)組，包括：

響應(yīng)于查詢壓縮語(yǔ)句，調(diào)用查詢壓縮模塊，在數(shù)據(jù)倉(cāng)庫(kù)工具h(yuǎn)ive對(duì)應(yīng)的內(nèi)存中，執(zhí)行所述基于數(shù)據(jù)倉(cāng)庫(kù)中的任一用戶標(biāo)識(shí)對(duì)應(yīng)的多個(gè)第一歷史行為數(shù)據(jù)中的多個(gè)第一內(nèi)容標(biāo)識(shí)，生成第一位數(shù)組的步驟；

其中，所述查詢壓縮語(yǔ)句用于指示獲取用于表示所述任一用戶標(biāo)識(shí)對(duì)應(yīng)的多個(gè)第一內(nèi)容標(biāo)識(shí)的第一位數(shù)組，所述查詢壓縮模塊是以所述hive為基礎(chǔ)擴(kuò)展的功能模塊。

在另一種可選的實(shí)現(xiàn)方式中，所述第一歷史行為數(shù)據(jù)用于記錄在第一時(shí)間段內(nèi)被執(zhí)行交互行為的內(nèi)容；

所述存儲(chǔ)所述任一用戶標(biāo)識(shí)以及所述第一位數(shù)組的對(duì)應(yīng)關(guān)系，包括：

基于所述任一用戶標(biāo)識(shí)和所述第一時(shí)間段，生成第一關(guān)鍵字；

存儲(chǔ)所述第一關(guān)鍵字以及所述第一位數(shù)組的對(duì)應(yīng)關(guān)系。

在另一種可選的實(shí)現(xiàn)方式中，所述存儲(chǔ)所述任一用戶標(biāo)識(shí)以及所述第一位數(shù)組的對(duì)應(yīng)關(guān)系之后，所述方法還包括：

響應(yīng)于到達(dá)位數(shù)組更新時(shí)間，基于所述數(shù)據(jù)倉(cāng)庫(kù)中的所述任一用戶標(biāo)識(shí)對(duì)應(yīng)的多個(gè)第二歷史行為數(shù)據(jù)中的多個(gè)第二內(nèi)容標(biāo)識(shí)，生成第二位數(shù)組，所述第二歷史行為數(shù)據(jù)用于記錄在所述位數(shù)組更新時(shí)間所屬的第二時(shí)間段內(nèi)被執(zhí)行交互行為的內(nèi)容；