[發(fā)明專利]數(shù)據(jù)同步檢測方法和裝置

在審

• 申請?zhí)枺?/td>: 202110706515.3
• 申請日: 2021-06-24
• 公開（公告）號: CN113297330A
• 公開（公告）日: 2021-08-24
• 發(fā)明（設(shè)計）人: 曾坤
• 申請（專利權(quán)）人: 維沃移動通信有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/23;G06F16/242;G06F16/2455;G06F16/22
• 代理公司: 北京路浩知識產(chǎn)權(quán)代理有限公司 11002
• 代理人: 楊明月

本申請公開了一種數(shù)據(jù)同步檢測方法和裝置，屬于計算機(jī)技術(shù)領(lǐng)域。所述方法包括執(zhí)行離線數(shù)據(jù)抽取定時任務(wù)，所述離線數(shù)據(jù)抽取定時任務(wù)用于每隔預(yù)設(shè)時間將待同步表中的數(shù)據(jù)同步至離線數(shù)據(jù)倉庫表；調(diào)用數(shù)據(jù)庫查詢應(yīng)用程序接口API，獲取所述數(shù)據(jù)庫查詢API返回的值；根據(jù)所述數(shù)據(jù)庫查詢API返回的值，對所述待同步表和所述離線數(shù)據(jù)倉庫表進(jìn)行數(shù)據(jù)同步檢測，得到數(shù)據(jù)同步檢測結(jié)果。

技術(shù)領(lǐng)域

本申請屬于計算機(jī)技術(shù)領(lǐng)域，具體涉及一種數(shù)據(jù)同步檢測方法和裝置。

背景技術(shù)

隨著大數(shù)據(jù)技術(shù)的廣泛應(yīng)用，離線同步數(shù)據(jù)越來越普遍，尤其是從數(shù)據(jù)庫離線抽取數(shù)據(jù)到數(shù)據(jù)倉庫存儲。同步數(shù)據(jù)需要進(jìn)行檢測是否成功，以及需要檢測數(shù)據(jù)庫表結(jié)構(gòu)發(fā)生了變更，避免影響數(shù)據(jù)同步。

現(xiàn)有的檢測方式是根據(jù)同步數(shù)據(jù)任務(wù)返回碼是否為0判斷數(shù)據(jù)是否同步成功，在數(shù)據(jù)庫表結(jié)構(gòu)發(fā)生變化時，根據(jù)數(shù)據(jù)庫表結(jié)構(gòu)人工調(diào)整離線數(shù)據(jù)倉庫表結(jié)構(gòu)。

根據(jù)同步數(shù)據(jù)任務(wù)返回碼判斷數(shù)據(jù)是否抽取成功，存在不夠準(zhǔn)確的缺陷，并且當(dāng)數(shù)據(jù)庫表結(jié)構(gòu)發(fā)生變更，很多時候無法及時通知到數(shù)據(jù)倉庫管理人員，導(dǎo)致數(shù)據(jù)同步失敗，需要數(shù)據(jù)庫管理人員及時通知，數(shù)據(jù)倉庫管理員也需要手動調(diào)整離線數(shù)據(jù)倉庫表結(jié)構(gòu)，維護(hù)成本比較高。

發(fā)明內(nèi)容

本申請實(shí)施例的目的是提供一種數(shù)據(jù)同步檢測方法和裝置，能夠解決數(shù)據(jù)同步檢測的精準(zhǔn)度低和數(shù)據(jù)同步過程中人工維護(hù)成本高的問題。

第一方面，本申請實(shí)施例提供了一種數(shù)據(jù)同步檢測方法，該方法包括：

執(zhí)行離線數(shù)據(jù)抽取定時任務(wù)，所述離線數(shù)據(jù)抽取定時任務(wù)用于每隔預(yù)設(shè)時間將待同步表中的數(shù)據(jù)同步至離線數(shù)據(jù)倉庫表；

調(diào)用數(shù)據(jù)庫查詢應(yīng)用程序接口API，獲取所述數(shù)據(jù)庫查詢API返回的值；

根據(jù)所述數(shù)據(jù)庫查詢API返回的值，對所述待同步表和所述離線數(shù)據(jù)倉庫表進(jìn)行數(shù)據(jù)同步檢測，得到數(shù)據(jù)同步檢測結(jié)果。

第二方面，本申請實(shí)施例提供了一種數(shù)據(jù)同步檢測裝置，該裝置包括：

定時抽取模塊，用于執(zhí)行離線數(shù)據(jù)抽取定時任務(wù)，所述離線數(shù)據(jù)抽取定時任務(wù)用于每隔預(yù)設(shè)時間將待同步表中的數(shù)據(jù)同步至離線數(shù)據(jù)倉庫表；

數(shù)據(jù)查詢模塊，用于調(diào)用數(shù)據(jù)庫查詢應(yīng)用程序接口API，獲取所述數(shù)據(jù)庫查詢API返回的值；

同步檢測模塊，用于根據(jù)所述數(shù)據(jù)庫查詢API返回的值，對所述待同步表和所述離線數(shù)據(jù)倉庫表進(jìn)行數(shù)據(jù)同步檢測，得到數(shù)據(jù)同步檢測結(jié)果。

第三方面，本申請實(shí)施例提供了一種電子設(shè)備，該電子設(shè)備包括處理器、存儲器及存儲在所述存儲器上并可在所述處理器上運(yùn)行的程序或指令，所述程序或指令被所述處理器執(zhí)行時實(shí)現(xiàn)如第一方面所述的方法的步驟。

第四方面，本申請實(shí)施例提供了一種可讀存儲介質(zhì)，所述可讀存儲介質(zhì)上存儲程序或指令，所述程序或指令被處理器執(zhí)行時實(shí)現(xiàn)如第一方面所述的方法的步驟。

第五方面，本申請實(shí)施例提供了一種芯片，所述芯片包括處理器和通信接口，所述通信接口和所述處理器耦合，所述處理器用于運(yùn)行程序或指令，實(shí)現(xiàn)如第一方面所述的方法。

在本申請實(shí)施例中，通過執(zhí)行離線數(shù)據(jù)抽取定時任務(wù)將數(shù)據(jù)同步至離線數(shù)據(jù)倉庫表，再通過數(shù)據(jù)庫查詢API的返回值進(jìn)行數(shù)據(jù)同步檢測，提高了數(shù)據(jù)抽取檢測的精準(zhǔn)度，減少了數(shù)據(jù)同步過程中的人工維護(hù)成本。

附圖說明

圖1是本申請?zhí)峁┑臄?shù)據(jù)同步檢測方法的流程示意圖；

圖2是本申請?zhí)峁┑母码x線數(shù)據(jù)倉庫表的表結(jié)構(gòu)的流程示意圖；

圖3是本申請?zhí)峁┑膭?chuàng)建所述離線數(shù)據(jù)倉庫表的流程示意圖；

圖4為本申請?zhí)峁┑臄?shù)據(jù)同步檢測裝置的結(jié)構(gòu)示意圖；