[發(fā)明專利]數(shù)據(jù)處理的方法、裝置、設(shè)備和計(jì)算機(jī)可讀介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202011325604.5
• 申請(qǐng)日: 2020-11-23
• 公開（公告）號(hào): CN113778959B
• 公開（公告）日: 2023-09-05
• 發(fā)明（設(shè)計(jì)）人: 穆啟健
• 申請(qǐng)（專利權(quán)）人: 北京京東振世信息技術(shù)有限公司
• 主分類號(hào): G06F16/17
• 分類號(hào): G06F16/17;G06F16/18;G06Q40/12
• 代理公司: 中原信達(dá)知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11219
• 代理人: 郭晗;趙迪

1.一種數(shù)據(jù)處理的方法，其特征在于，包括：

通過生成業(yè)務(wù)數(shù)據(jù)時(shí)的日志文件，監(jiān)聽生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的消息；

根據(jù)所述日志文件中的標(biāo)識(shí)，調(diào)用數(shù)據(jù)基礎(chǔ)信息補(bǔ)全所述日志文件得到日志數(shù)據(jù)，并將所述日志數(shù)據(jù)寫入數(shù)據(jù)池，所述數(shù)據(jù)基礎(chǔ)信息是表征業(yè)務(wù)數(shù)據(jù)的基礎(chǔ)信息；

實(shí)時(shí)抽取所述數(shù)據(jù)池中的數(shù)據(jù)，并推送抽取的數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述數(shù)據(jù)處理的方法，其特征在于，所述通過生成業(yè)務(wù)數(shù)據(jù)時(shí)的日志文件，監(jiān)聽生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的消息，包括：

采用預(yù)設(shè)方式獲取生成業(yè)務(wù)數(shù)據(jù)時(shí)的日志文件，監(jiān)聽生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的消息。

3.根據(jù)權(quán)利要求1所述數(shù)據(jù)處理的方法，其特征在于，所述通過生成業(yè)務(wù)數(shù)據(jù)時(shí)的日志文件，包括：

獲取生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的日志文件失敗的情況下，則存儲(chǔ)生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的信息；

解析生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的信息，得到生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的日志文件；

所述根據(jù)所述日志文件中的標(biāo)識(shí)，調(diào)用數(shù)據(jù)基礎(chǔ)信息補(bǔ)全所述日志文件得到日志數(shù)據(jù)，包括：

根據(jù)所述日志文件中的標(biāo)識(shí)，調(diào)用所述數(shù)據(jù)基礎(chǔ)信息失敗，則存儲(chǔ)調(diào)用所述數(shù)據(jù)基礎(chǔ)信息的數(shù)據(jù)；

解析所述調(diào)用所述數(shù)據(jù)基礎(chǔ)信息的數(shù)據(jù)，得到所述數(shù)據(jù)基礎(chǔ)信息以補(bǔ)全所述日志文件得到日志數(shù)據(jù)。

4.根據(jù)權(quán)利要求1或3所述數(shù)據(jù)處理的方法，其特征在于，所述調(diào)用數(shù)據(jù)基礎(chǔ)信息補(bǔ)全所述日志文件得到日志數(shù)據(jù)，包括：

調(diào)用所述數(shù)據(jù)基礎(chǔ)信息失敗，則在預(yù)設(shè)時(shí)間段后再次調(diào)用所述數(shù)據(jù)基礎(chǔ)信息成功；

利用再次調(diào)用得到的數(shù)據(jù)基礎(chǔ)信息補(bǔ)全所述日志文件得到日志數(shù)據(jù)。

5.根據(jù)權(quán)利要求1所述數(shù)據(jù)處理的方法，其特征在于，所述方法還包括：

通過比較兩個(gè)或三個(gè)監(jiān)控表，監(jiān)控所述數(shù)據(jù)處理，所述監(jiān)控表包括第一數(shù)據(jù)監(jiān)控表、第二數(shù)據(jù)監(jiān)控表和第三數(shù)據(jù)監(jiān)控表，

所述第一數(shù)據(jù)監(jiān)控表是根據(jù)所述日志文件獲取的，所述第二數(shù)據(jù)監(jiān)控表是根據(jù)所述數(shù)據(jù)池中的數(shù)據(jù)獲取的，所述第三數(shù)據(jù)監(jiān)控表是根據(jù)所述實(shí)時(shí)抽取的數(shù)據(jù)獲取的。

6.根據(jù)權(quán)利要求1或5所述數(shù)據(jù)處理的方法，其特征在于，所述根據(jù)所述日志文件中的標(biāo)識(shí)，調(diào)用數(shù)據(jù)基礎(chǔ)信息補(bǔ)全所述日志文件得到日志數(shù)據(jù)，包括：

根據(jù)數(shù)據(jù)表的日志文件，更新緩存中的數(shù)據(jù)；

根據(jù)所述日志文件中的標(biāo)識(shí)，在所述緩存中調(diào)用數(shù)據(jù)基礎(chǔ)信息補(bǔ)全所述日志文件得到日志數(shù)據(jù)。

7.根據(jù)權(quán)利要求1所述數(shù)據(jù)處理的方法，其特征在于，所述將所述日志數(shù)據(jù)寫入數(shù)據(jù)池之后，還包括：

將外部數(shù)據(jù)通過接口直接寫入所述數(shù)據(jù)池中。

8.一種數(shù)據(jù)處理的裝置，其特征在于，包括：

監(jiān)聽模塊，用于通過生成業(yè)務(wù)數(shù)據(jù)時(shí)的日志文件，監(jiān)聽生成所述業(yè)務(wù)數(shù)據(jù)時(shí)的消息；

補(bǔ)全模塊，用于根據(jù)所述日志文件中的標(biāo)識(shí)，調(diào)用數(shù)據(jù)基礎(chǔ)信息補(bǔ)全所述日志文件得到日志數(shù)據(jù)，并將所述日志數(shù)據(jù)寫入數(shù)據(jù)池，所述數(shù)據(jù)基礎(chǔ)信息是表征業(yè)務(wù)數(shù)據(jù)的基礎(chǔ)信息；

抽取模塊，用于實(shí)時(shí)抽取所述數(shù)據(jù)池中的數(shù)據(jù)，并推送抽取的數(shù)據(jù)。

9.一種數(shù)據(jù)處理的電子設(shè)備，其特征在于，包括：

一個(gè)或多個(gè)處理器；

存儲(chǔ)裝置，用于存儲(chǔ)一個(gè)或多個(gè)程序，

當(dāng)所述一個(gè)或多個(gè)程序被所述一個(gè)或多個(gè)處理器執(zhí)行，使得所述一個(gè)或多個(gè)處理器實(shí)現(xiàn)如權(quán)利要求1-7中任一所述的方法。

10.一種計(jì)算機(jī)可讀介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-7中任一所述的方法。