[發明專利]超時數據的檢測方法、裝置、服務器和計算機存儲介質

在審

• 申請號: 202010933714.3
• 申請日: 2020-09-08
• 公開（公告）號: CN111984455A
• 公開（公告）日: 2020-11-24
• 發明（設計）人: 徐龍;劉念;耿鵬;徐加江;王燦
• 申請（專利權）人: 中國農業銀行股份有限公司
• 主分類號: G06F11/07
• 分類號: G06F11/07
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 李慧引

本申請提供一種超時數據的檢測方法、裝置、服務器和計算機存儲介質，該方法包括，獲取當前時刻之前的連續N個檢測周期內目標業務系統發送的每一個數據文件的傳輸時長；針對N個檢測周期中的每一個檢測周期，計算檢測周期內的所有傳輸時長的平均值，得到檢測周期對應的檢測周期均值；根據每一個檢測周期的檢測周期均值和對應的加權系數，計算得到N個檢測周期對應的考核周期均值；根據考核周期均值和N個檢測周期中最晚的檢測周期的檢測周期均值確定目標業務系統對應的超時閾值。本方案能夠根據數據文件的實際傳輸情況靈活的制定超時閾值，從而確保后續對超時數據的檢測結果的準確性。

技術領域

本發明涉及數據處理技術領域，特別涉及一種超時數據的檢測方法、裝置、服務器和計算機存儲介質。

背景技術

大數據平臺是目前銀行常用的一種數據處理系統，大數據平臺可以通過網絡和銀行的多個業務系統連接，每個業務系統均可以作為數據生產者，將運行時產生的數據文件發送至大數據平臺，由大數據平臺對數據文件進行分析和處理，得到相應的處理結果。

為了保障處理結果的時效性，大數據平臺一般需要按一定的超時閾值對收到的數據文件進行檢測，若收到的數據文件的傳輸時長(指代從數據文件產生的時刻到收到數據文件的時刻這段時長)大于超時閾值，則將其確定為超時數據文件并刪除該數據文件。

目前，超時閾值一般是由相關人員人為指定，超時閾值并不能和業務數據的實際傳輸情況相匹配，檢測結果的準確度較低，容易出現超時閾值過小，以至于保留的可處理的數據文件過少的，或者超時閾值過大，以至于處理結果時效性較差等問題。

發明內容

基于上述現有技術的缺點，本申請提供一種超時數據的檢測方法、裝置、服務器和計算機存儲介質，以提供一種更準確的超時數據檢測方案。

本申請第一方面提供一種超時數據的檢測方法，包括：

獲取當前時刻之前的連續N個檢測周期內目標業務系統發送的每一個數據文件的傳輸時長；其中，所述N個檢測周期中最晚的檢測周期的結束時刻為所述當前時刻；所述N為預設的正整數；

針對所述N個檢測周期中的每一個檢測周期，計算所述檢測周期內的所有傳輸時長的平均值，得到所述檢測周期對應的檢測周期均值；

根據每一個所述檢測周期的檢測周期均值和對應的加權系數，計算得到所述N個檢測周期對應的考核周期均值；其中，所述檢測周期對應的加權系數與所述檢測周期的結束時刻距離所述當前時刻的時長負相關；

根據所述考核周期均值和所述N個檢測周期中最晚的檢測周期的檢測周期均值確定所述目標業務系統對應的超時閾值；其中，所述超時閾值作為檢測所述目標業務系統發送的數據文件是否超時的依據。

可選的，所述針對所述N個檢測周期中的每一個檢測周期，計算所述檢測周期內的所有傳輸時長的平均值，得到所述檢測周期對應的檢測周期均值之前，還包括：

針對所述N個檢測周期中的每一個檢測周期，在所述檢測周期內的所有傳輸時長中檢測出每一個異常傳輸時長；

所述針對所述N個檢測周期中的每一個檢測周期，計算所述檢測周期內的所有傳輸時長的平均值，得到所述檢測周期對應的檢測周期均值，包括：

針對所述N個檢測周期中的每一個檢測周期，計算所述檢測周期內除檢測得到的異常傳輸時長以外的所有傳輸時長的平均值，得到所述檢測周期對應的檢測周期均值。

可選的，所述根據所述考核周期均值和所述N個檢測周期中最晚的檢測周期的檢測周期均值確定所述目標業務系統對應的超時閾值，包括：