[發明專利]數據處理方法、裝置、服務器和存儲介質在審
| 申請號: | 202110528221.6 | 申請日: | 2021-05-14 |
| 公開(公告)號: | CN113190623A | 公開(公告)日: | 2021-07-30 |
| 發明(設計)人: | 邢延民;張克新 | 申請(專利權)人: | 京東數科海益信息科技有限公司 |
| 主分類號: | G06F16/27 | 分類號: | G06F16/27;G06F16/22;G06F16/23;G06F16/2455;G06F16/2458 |
| 代理公司: | 北京同立鈞成知識產權代理有限公司 11205 | 代理人: | 楊俊輝;黃健 |
| 地址: | 100176 北京市北京經濟技*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據處理 方法 裝置 服務器 存儲 介質 | ||
本申請提供一種數據處理方法、裝置、服務器和存儲介質,其中,該方法包括:從客戶端發出的數據獲取指令中提取得到目標節點和目標時間段,根據目標節點和目標時間段,獲取預設數據模型中與目標節點和目標時間段匹配的目標數據池,獲取目標數據池中各個節點數據的時間戳,根據時間戳,從目標數據池中獲取與目標時間段匹配的目標節點數據和目標節點數據的總數量。該技術方案中,通過利用節點數據的時間戳,將節點數據存儲至對應的數據池,在讀取預設數據模型中的節點數據時,可以根據目標節點和目標時間段,快速的從目標數據池中提取得到與目標時間段匹配的目標節點數據,加快數據的讀取速度,提高節點數據的獲取效率。
技術領域
本申請涉及技術領域,尤其涉及一種數據處理方法、裝置、服務器和存儲介質。
背景技術
在數據處理的過程中,數據往往會流經多個節點,為了確保整個數據處理流程的正常工作,需要對每一個節點中流入的節點數據和流出的節點數據進行統計分析,以確定當前節點的數據處理是否出現異常。
現有技術中,在獲取節點中流入的節點數據或者流出的節點數據時,主要是利用時序數據庫先將流入至當前節點的數據進行存儲,然后對時序數據庫進行數據查詢,以獲取當前節點的流入流出數據。
但是,現有技術中所使用的時序數據庫,其數據存儲結構較差,影響數據庫的性能,在數據讀寫的過程中會存在很大壓力,導致節點數據的獲取效率低。
發明內容
本申請提供一種數據處理方法、裝置、服務器和存儲介質,用于解決現有節點數據的獲取效率低的問題。
第一方面,本申請實施例提供一種數據處理方法,包括:
響應于客戶端發出的數據獲取指令,從所述數據獲取指令中提取得到目標節點和目標時間段;
根據所述目標節點和目標時間段,獲取預設數據模型中與所述目標節點和目標時間段匹配的目標數據池,所述目標數據池用于存儲節點數據;
獲取所述目標數據池中各個節點數據的時間戳,所述時間戳用于指示所述節點數據流轉至目標節點的時間;
根據所述時間戳,從所述目標數據池中獲取與所述目標時間段匹配的目標節點數據和所述目標節點數據的總數量。
在第一方面的一種可能設計中,所述根據所述目標節點和目標時間段,獲取預設數據模型中與所述目標節點和目標時間段匹配的目標數據池,包括:
根據所述目標節點,從所述預設數據模型獲取與所述目標節點匹配的目標數據池集合;
根據所述目標時間段,從所述目標數據池集合中獲取與所述目標時間段匹配的目標數據池。
在第一方面的另一種可能設計中,所述根據所述目標時間段,從所述目標數據池集合中獲取與所述目標時間段匹配的目標數據池,包括:
獲取所述目標數據池集合中各個數據池的索引;
根據各個數據池的索引,從各個數據池中獲取得到與所述目標時間段匹配的目標數據池。
在第一方面的再一種可能設計中,所述根據各個數據池的索引,從各個數據池中獲取得到與所述目標時間段匹配的目標數據池之前,還包括:
根據預設時長和當前時間,確定所述目標數據池集合中各個數據池對應的時間區段;
根據各個數據池對應的時間區段,構建得到各個數據池的索引。
在第一方面的又一種可能設計中,所述根據各個數據池對應的時間區段,構建得到各個數據池的索引之后,還包括:
獲取各個節點數據的時間戳,根據所述時間戳和各個數據池對應的索引,確定各個節點數據匹配的數據池;
將各個節點數據存儲至匹配的數據池的數據存儲區中。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于京東數科海益信息科技有限公司,未經京東數科海益信息科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110528221.6/2.html,轉載請聲明來源鉆瓜專利網。





