[發(fā)明專利]一種數(shù)據(jù)處理方法、裝置、設(shè)備及介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010810179.2
• 申請(qǐng)日: 2020-08-13
• 公開(kāi)（公告）號(hào): CN111988218A
• 公開(kāi)（公告）日: 2020-11-24
• 發(fā)明（設(shè)計(jì)）人: 顧斌;田昆
• 申請(qǐng)（專利權(quán)）人: 支付寶（杭州）信息技術(shù)有限公司
• 主分類號(hào): H04L12/66
• 分類號(hào): H04L12/66;H04L29/06
• 代理公司: 北京晉德允升知識(shí)產(chǎn)權(quán)代理有限公司 11623
• 代理人: 劉立升

本說(shuō)明書(shū)實(shí)施例提供了一種數(shù)據(jù)處理方法、裝置、設(shè)備及介質(zhì)，數(shù)據(jù)處理方法包括：存儲(chǔ)若干用于構(gòu)建網(wǎng)關(guān)的公共組件；接收網(wǎng)關(guān)構(gòu)建申請(qǐng)，根據(jù)所述網(wǎng)關(guān)構(gòu)建申請(qǐng)從所述若干公共組件中確定目標(biāo)組件；基于所述目標(biāo)組件構(gòu)建所述網(wǎng)關(guān)構(gòu)建申請(qǐng)對(duì)應(yīng)的網(wǎng)關(guān)，所述網(wǎng)關(guān)構(gòu)建申請(qǐng)對(duì)應(yīng)的網(wǎng)關(guān)用于抓取符合所述網(wǎng)關(guān)構(gòu)建申請(qǐng)所包含的數(shù)據(jù)特征的數(shù)據(jù)。

技術(shù)領(lǐng)域

本申請(qǐng)涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及一種數(shù)據(jù)處理方法、裝置、設(shè)備及介質(zhì)。

背景技術(shù)

現(xiàn)有技術(shù)中，很多情況下需要獲取各種各樣的數(shù)據(jù)，并對(duì)數(shù)據(jù)進(jìn)行處理。特別的，由于數(shù)據(jù)處理的需要，要求分別獲取不同種類的數(shù)據(jù)，并分別對(duì)各種類的數(shù)據(jù)進(jìn)行處理。在此基礎(chǔ)上，如何分別獲取不同種類的數(shù)據(jù)，避免數(shù)據(jù)獲取過(guò)程中的數(shù)據(jù)混淆或干擾或泄露是一個(gè)重要課題。

有鑒于此，需要更有效和更高效的數(shù)據(jù)處理方案。

發(fā)明內(nèi)容

本說(shuō)明書(shū)本說(shuō)明書(shū)實(shí)施例提供一種數(shù)據(jù)處理方法、裝置、設(shè)備及介質(zhì)，用以解決如何更有效和更高效地進(jìn)行不同種類的數(shù)據(jù)的隔離處理的技術(shù)問(wèn)題。

為解決上述技術(shù)問(wèn)題，本說(shuō)明書(shū)實(shí)施例提供如下技術(shù)方案：

本說(shuō)明書(shū)實(shí)施例提供一種數(shù)據(jù)處理方法，包括：

存儲(chǔ)若干用于構(gòu)建網(wǎng)關(guān)的公共組件；

接收網(wǎng)關(guān)構(gòu)建申請(qǐng)，根據(jù)所述網(wǎng)關(guān)構(gòu)建申請(qǐng)從所述若干公共組件中確定目標(biāo)組件；

基于所述目標(biāo)組件構(gòu)建所述網(wǎng)關(guān)構(gòu)建申請(qǐng)對(duì)應(yīng)的網(wǎng)關(guān)，所述網(wǎng)關(guān)構(gòu)建申請(qǐng)對(duì)應(yīng)的網(wǎng)關(guān)用于抓取符合所述網(wǎng)關(guān)構(gòu)建申請(qǐng)所包含的數(shù)據(jù)特征的數(shù)據(jù)。

本說(shuō)明書(shū)實(shí)施例提供第一種數(shù)據(jù)獲取方法，包括：

向網(wǎng)關(guān)管理端發(fā)送網(wǎng)關(guān)構(gòu)建申請(qǐng)，所述網(wǎng)關(guān)構(gòu)建申請(qǐng)用于所述網(wǎng)關(guān)管理端構(gòu)建目標(biāo)網(wǎng)關(guān)；所述網(wǎng)關(guān)構(gòu)建申請(qǐng)包含數(shù)據(jù)特征，所述目標(biāo)網(wǎng)關(guān)用于抓取符合所述數(shù)據(jù)特征的數(shù)據(jù)；

接收到所述網(wǎng)關(guān)構(gòu)建端發(fā)送的網(wǎng)關(guān)構(gòu)建完成消息后，向所述網(wǎng)關(guān)管理端發(fā)送數(shù)據(jù)獲取申請(qǐng)，所述數(shù)據(jù)獲取申請(qǐng)用于所述網(wǎng)關(guān)管理端從已構(gòu)建網(wǎng)關(guān)中確定所述目標(biāo)網(wǎng)關(guān)，并通過(guò)所述目標(biāo)網(wǎng)關(guān)抓取所述數(shù)據(jù)獲取申請(qǐng)對(duì)應(yīng)的目標(biāo)數(shù)據(jù)；

接收并存儲(chǔ)所述目標(biāo)網(wǎng)關(guān)發(fā)送的所述目標(biāo)數(shù)據(jù)。

本說(shuō)明書(shū)實(shí)施例提供第二種數(shù)據(jù)獲取方法，包括：

確定待獲取數(shù)據(jù)的數(shù)據(jù)特征，確定是否存在所述數(shù)據(jù)特征對(duì)應(yīng)的目標(biāo)網(wǎng)關(guān)，所述目標(biāo)網(wǎng)關(guān)用于抓取目標(biāo)數(shù)據(jù)，所述目標(biāo)數(shù)據(jù)為符合所述數(shù)據(jù)特征的數(shù)據(jù)；

若是，則通過(guò)所述目標(biāo)網(wǎng)關(guān)抓取并存儲(chǔ)所述目標(biāo)數(shù)據(jù)；

若否，則構(gòu)建所述目標(biāo)網(wǎng)關(guān)，并通過(guò)所述目標(biāo)網(wǎng)關(guān)抓取并存儲(chǔ)所述目標(biāo)數(shù)據(jù)。

本說(shuō)明書(shū)實(shí)施例提供一種數(shù)據(jù)處理裝置，包括：

組件存儲(chǔ)模塊，用于存儲(chǔ)若干用于構(gòu)建網(wǎng)關(guān)的公共組件；

組件選擇模塊，用于接收網(wǎng)關(guān)構(gòu)建申請(qǐng)，根據(jù)所述網(wǎng)關(guān)構(gòu)建申請(qǐng)從所述若干公共組件中確定目標(biāo)組件；

網(wǎng)關(guān)構(gòu)建模塊，用于基于所述目標(biāo)組件構(gòu)建所述網(wǎng)關(guān)構(gòu)建申請(qǐng)對(duì)應(yīng)的網(wǎng)關(guān)，所述網(wǎng)關(guān)構(gòu)建申請(qǐng)對(duì)應(yīng)的網(wǎng)關(guān)用于抓取符合所述網(wǎng)關(guān)構(gòu)建申請(qǐng)所包含的數(shù)據(jù)特征的數(shù)據(jù)。

本說(shuō)明書(shū)實(shí)施例提供一種數(shù)據(jù)獲取裝置，包括：

網(wǎng)關(guān)構(gòu)建申請(qǐng)模塊，用于向網(wǎng)關(guān)管理端發(fā)送網(wǎng)關(guān)構(gòu)建申請(qǐng)，所述網(wǎng)關(guān)構(gòu)建申請(qǐng)用于所述網(wǎng)關(guān)管理端構(gòu)建目標(biāo)網(wǎng)關(guān)；所述網(wǎng)關(guān)構(gòu)建申請(qǐng)包含數(shù)據(jù)特征，所述目標(biāo)網(wǎng)關(guān)用于抓取符合所述數(shù)據(jù)特征的數(shù)據(jù)；