[發(fā)明專利]數(shù)據(jù)處理方法、裝置及計(jì)算機(jī)設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202010812467.1
• 申請(qǐng)日: 2020-08-13
• 公開（公告）號(hào): CN112416316A
• 公開（公告）日: 2021-02-26
• 發(fā)明（設(shè)計(jì)）人: 王翔宇
• 申請(qǐng)（專利權(quán)）人: 上海嗶哩嗶哩科技有限公司
• 主分類號(hào): G06F8/30
• 分類號(hào): G06F8/30
• 代理公司: 北京英特普羅知識(shí)產(chǎn)權(quán)代理有限公司 11015
• 代理人: 鄧小玲;王勇

1.一種數(shù)據(jù)處理方法，其特征在于，包括：

獲取配置文件，所述配置文件包括數(shù)據(jù)采集層的第一配置信息，數(shù)據(jù)解析層的第二配置信息以及數(shù)據(jù)發(fā)送層的第三配置信息；

對(duì)所述配置文件進(jìn)行解析，以得到所述第一配置信息，所述第二配置信息以及所述第三配置信息；

根據(jù)所述第一配置信息采集預(yù)設(shè)路徑下的文件，并根據(jù)所述文件生成第一事務(wù)；

將所述第一事務(wù)發(fā)送給所述數(shù)據(jù)解析層，以使所述數(shù)據(jù)解析層根據(jù)所述第二配置信息對(duì)所述第一事務(wù)進(jìn)行解析，得到第二事務(wù)；

將所述第二事務(wù)發(fā)送給數(shù)據(jù)發(fā)送層，以使所述數(shù)據(jù)發(fā)送層根據(jù)所述第三配置信息將所述第二事務(wù)發(fā)送給預(yù)設(shè)的數(shù)據(jù)網(wǎng)關(guān)。

2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述第一配置信息包括數(shù)據(jù)采集插件的第一標(biāo)識(shí)信息以及采集所述文件的路徑信息，所述根據(jù)所述第一配置信息采集預(yù)設(shè)路徑下的文件，并根據(jù)所述文件生成第一事務(wù)包括：

根據(jù)所述第一標(biāo)識(shí)信息啟動(dòng)與所述第一標(biāo)識(shí)信息對(duì)應(yīng)的數(shù)據(jù)采集插件，以使所述數(shù)據(jù)采集插件根據(jù)所述路徑信息采集所述文件，并對(duì)采集到的文件進(jìn)行封裝生成所述第一事務(wù)。

3.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)解析層包括數(shù)據(jù)解析插件，所述第二配置信息包括所述數(shù)據(jù)解析插件的第二標(biāo)識(shí)信息以及所述數(shù)據(jù)解析插件對(duì)應(yīng)的解析類型信息，所述數(shù)據(jù)解析層根據(jù)所述第二配置信息對(duì)所述第一事務(wù)進(jìn)行解析，得到第二事務(wù)包括：

根據(jù)所述第二標(biāo)識(shí)信息啟動(dòng)與所述第二標(biāo)識(shí)信息對(duì)應(yīng)的數(shù)據(jù)解析插件；

所述數(shù)據(jù)解析插件根據(jù)所述解析類型信息對(duì)所述第一事務(wù)進(jìn)行解析，得到所述第二事務(wù)。

4.根據(jù)權(quán)利要求3所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)解析層包括至少兩個(gè)數(shù)據(jù)解析插件，所述第二配置信息還包括所述數(shù)據(jù)解析插件的層級(jí)信息，所述根據(jù)所述第二標(biāo)識(shí)信息啟動(dòng)與所述第二標(biāo)識(shí)信息對(duì)應(yīng)的數(shù)據(jù)解析插件包括：

根據(jù)所述層級(jí)信息與所述第二標(biāo)識(shí)信息依次啟動(dòng)與所述第二標(biāo)識(shí)信息對(duì)應(yīng)的數(shù)據(jù)解析插件。

5.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)發(fā)送層包括數(shù)據(jù)發(fā)送插件，所述第三配置信息包括所述數(shù)據(jù)發(fā)送插件的第三標(biāo)識(shí)信息及所述數(shù)據(jù)網(wǎng)關(guān)的地址信息，所述數(shù)據(jù)發(fā)送層根據(jù)所述第三配置信息將所述第二事務(wù)發(fā)送給預(yù)設(shè)的數(shù)據(jù)網(wǎng)關(guān)包括：

根據(jù)所述第三標(biāo)識(shí)信息啟動(dòng)與所述第三標(biāo)識(shí)信息對(duì)應(yīng)的數(shù)據(jù)發(fā)送插件；

所述數(shù)據(jù)發(fā)送插件根據(jù)所述地址信息將所述第二事務(wù)發(fā)送給預(yù)設(shè)的數(shù)據(jù)網(wǎng)關(guān)。

6.根據(jù)權(quán)利要求5所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)發(fā)送層包括至少兩個(gè)數(shù)據(jù)發(fā)送插件，所述數(shù)據(jù)發(fā)送插件根據(jù)所述地址信息將所述第二事務(wù)發(fā)送給預(yù)設(shè)的數(shù)據(jù)網(wǎng)關(guān)包括：

所述至少兩個(gè)數(shù)據(jù)發(fā)送插件根據(jù)所述地址信息，采用并行的方式將所述第二事務(wù)發(fā)送給預(yù)設(shè)的數(shù)據(jù)網(wǎng)關(guān)。

7.根據(jù)權(quán)利要求1至6任一項(xiàng)所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)處理方法還包括：

創(chuàng)建所述配置文件。

8.一種數(shù)據(jù)處理裝置，其特征在于，包括：

獲取模塊，用于獲取配置文件，所述配置文件包括數(shù)據(jù)采集層的第一配置信息，數(shù)據(jù)解析層的第二配置信息以及數(shù)據(jù)發(fā)送層的第三配置信息；

解析模塊，用于對(duì)所述配置文件進(jìn)行解析，以得到所述第一配置信息，所述第二配置信息以及所述第三配置信息；

采集模塊，用于根據(jù)所述第一配置信息采集預(yù)設(shè)路徑下的文件，并根據(jù)所述文件生成第一事務(wù)；

第一發(fā)送模塊，用于將所述第一事務(wù)發(fā)送給所述數(shù)據(jù)解析層，以使所述數(shù)據(jù)解析層根據(jù)所述第二配置信息對(duì)所述第一事務(wù)進(jìn)行解析，得到第二事務(wù)；

第二發(fā)送模塊，用于將所述第二事務(wù)發(fā)送給數(shù)據(jù)發(fā)送層，以使所述數(shù)據(jù)發(fā)送層根據(jù)所述第三配置信息將所述第二事務(wù)發(fā)送給預(yù)設(shè)的數(shù)據(jù)網(wǎng)關(guān)。

9.一種計(jì)算機(jī)設(shè)備，所述計(jì)算機(jī)設(shè)備，包括存儲(chǔ)器、處理器以及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)權(quán)利要求1至7任一項(xiàng)所述的數(shù)據(jù)處理方法的步驟。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于：所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至7任一項(xiàng)所述的數(shù)據(jù)處理方法的步驟。