[發(fā)明專利]一種數(shù)據(jù)處理的方法和裝置

在審

• 申請?zhí)枺?/td>: 202010628272.1
• 申請日: 2020-07-02
• 公開（公告）號: CN111858706A
• 公開（公告）日: 2020-10-30
• 發(fā)明（設計）人: 王政鐘
• 申請（專利權）人: 中國建設銀行股份有限公司;建信金融科技有限責任公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/248
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;李陽

本發(fā)明公開了數(shù)據(jù)處理的方法和裝置，涉及計算機技術領域。該方法的一具體實施方式包括接收數(shù)據(jù)請求，解析獲得所述請求的時間窗口；調用日期管理組件，根據(jù)預設分塊模型將所述時間窗口拆分為一個或多個時間子窗口，以基于當前數(shù)據(jù)庫調取每個時間子窗口對應的指標數(shù)據(jù)；調用分布式增量計算引擎組件，通過預設的泛化增量算法對所述指標數(shù)據(jù)進行處理得到目標指標值，進而返回所述目標指標值并進行展示。從而，本發(fā)明的實施方式能夠解決現(xiàn)有對用戶數(shù)據(jù)請求的計算效率低的問題。

技術領域

本發(fā)明涉及計算機技術領域，尤其涉及一種數(shù)據(jù)處理的方法和裝置。

背景技術

大數(shù)據(jù)時代，隨著數(shù)據(jù)量的指數(shù)式激增，對數(shù)據(jù)處理的計算能力要求也越來越高，計算機系統(tǒng)面臨的不僅是數(shù)據(jù)存儲與傳輸?shù)男实膲毫Γ€有用戶對于時效性要求的壓力。在市場上，越來越多的金融機構提出于實時計算的需求，即需要基于每時每刻的數(shù)據(jù)進行高效運算，以滿足用戶需求。

在實現(xiàn)本發(fā)明過程中，發(fā)明人發(fā)現(xiàn)現(xiàn)有技術中至少存在如下問題：

目前，對金融時間序列數(shù)據(jù)的研究往往頻繁的滑動時間窗口，而金融數(shù)據(jù)的體量往往是巨大的，傳統(tǒng)全量的金融時序數(shù)據(jù)效率低下，并且對歷史數(shù)據(jù)的重復計算造成計算資源的浪費，且適用范圍太小。

發(fā)明內容

有鑒于此，本發(fā)明實施例提供一種數(shù)據(jù)處理的方法和裝置，能夠解決現(xiàn)有對用戶數(shù)據(jù)請求的計算效率低的問題。

為實現(xiàn)上述目的，根據(jù)本發(fā)明實施例的一個方面，提供了一種數(shù)據(jù)處理的方法，包括接收數(shù)據(jù)請求，解析獲得所述請求的時間窗口；調用日期管理組件，根據(jù)預設分塊模型將所述時間窗口拆分為一個或多個時間子窗口，以基于當前數(shù)據(jù)庫調取每個時間子窗口對應的指標數(shù)據(jù)；調用分布式增量計算引擎組件，通過預設的泛化增量算法對所述指標數(shù)據(jù)進行處理得到目標指標值，進而返回所述目標指標值并進行展示。

可選地，調用分布式增量計算引擎組件之后，包括：

判斷是否接收到用戶選取的泛化增量算法，若是則通過選取的泛化增量算法對所述指標數(shù)據(jù)進行處理得到目標指標值；若否則根據(jù)預設配置信息匹配泛化增量算法，以基于匹配后的泛化增量算法對所述指標數(shù)據(jù)進行處理得到目標指標值。

可選地，根據(jù)預設分塊模型將所述時間窗口拆分為一個或多個時間子窗口，包括：

根據(jù)所述時間窗口，獲取相應的開始時間和結束時間；

提取開始時間和結束時間中的第一目標屬性信息，以計算兩者之差并判斷是否大于或等于預設第一閾值，若是則調取第一分塊模型，將所述時間窗口拆分為一個或多個時間子窗口；若否則判斷是否等于0，如果是則提取開始時間和結束時間中的第二目標屬性信息以將所述時間窗口拆分為一個或多個時間子窗口，如果否則提取開始時間和結束時間中的第二目標屬性信息和第三目標屬性信息以將所述時間窗口拆分為一個或多個時間子窗口。

可選地，提取開始時間和結束時間中的第二目標屬性信息以將所述時間窗口拆分為一個或多個時間子窗口，包括：

提取開始時間和結束時間中的第二目標屬性信息，計算兩者之差并判斷是否大于1，若是則調取第二分塊模型，將所述時間窗口拆分為一個或多個時間子窗口；若否則調取第三分塊模型，將所述時間窗口拆分為一個或多個時間子窗口。

可選地，提取開始時間和結束時間中的第二目標屬性信息和第三目標屬性信息以將所述時間窗口拆分為一個或多個時間子窗口，包括：

提取開始時間和結束時間中的第二目標屬性信息和第三目標屬性信息，判斷開始時間的第二目標屬性信息以及第三目標屬性信息是否分別等于對應屬性信息集中的最小數(shù)值；