[發明專利]數據處理方法、裝置、設備及存儲介質

在審

• 申請號: 202110206002.6
• 申請日: 2021-02-24
• 公開（公告）號: CN113761018A
• 公開（公告）日: 2021-12-07
• 發明（設計）人: 馬向攀;馮志恒;周海陽;高亞新;李源;尹翔
• 申請（專利權）人: 北京沃東天駿信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/28
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 朱穎;黃健

本申請提供一種數據處理方法、裝置、設備及存儲介質，其中該方法包括：獲取目標對象在多個維度的實時數據流，在預設時段內分別對多個維度的實時數據流進行數據統計，得到多個維度的統計數據，每個維度的統計數據用于指示目標對象的一個屬性值，將多個維度的統計數據存儲至第一數據庫中。通過上述處理過程，實現對目標對象在多個維度的數據采集、處理以及存儲，為針對目標對象的多維數據的監控與分析提供數據支撐，同時可滿足用戶對目標對象的多維數據的實時查詢需求。

技術領域

本申請涉及計算機領域，尤其涉及一種數據處理方法、裝置、設備及存儲介質。

背景技術

隨著互聯網技術的不斷發展，電子商務正得到越來越廣泛的應用。目前網絡消費已成為人們生活中不可分割的一部分，人們可以通過各大電商平臺、應用小程序等渠道，咨詢或選購各類電子產品、生活用品等物品。

以電商平臺為例，對于入駐電商平臺的企業用戶而言，目前有獲取各類分析數據的需求，例如獲取平臺店鋪的瀏覽數量、咨詢數量、在線客服服務質量等等。

然而，由于電商平臺每日生成的各類數據的數據量巨大，平臺的數據處理能力還無法實現對各類統計數據的實時監控和分析。

發明內容

本申請實施例提供一種數據處理方法、裝置、設備及存儲介質，實現對多維度數據的統計與監控。

本申請實施例的第一方面提供一種數據處理方法，包括：

獲取目標對象在多個維度的實時數據流，每個維度對應一個實時數據流；

在預設時段內分別對多個維度的實時數據流進行數據統計，得到多個維度的統計數據，每個維度的統計數據用于指示所述目標對象的一個屬性值；

將所述多個維度的統計數據存儲至第一數據庫。

在本申請的一個實施例中，所述獲取目標對象在不同維度的實時數據，包括：

從不同消息隊列中獲取所述目標對象在多個維度的實時數據流。

在本申請的一個實施例中，若所述多個維度的實時數據流中有至少兩個維度的實時數據流用于指示所述目標對象的同一屬性，所述方法還包括：

對所述至少兩個維度的實時數據流進行數據合并，得到合并數據流；

相應的，所述在預設時段內分別對多個維度的實時數據流進行數據統計，得到多個維度的統計數據，包括：

在預設時段內對所述合并數據流進行數據統計，得到所述合并數據流的統計數據。

在本申請的一個實施例中，所述對所述至少兩個維度的實時數據流進行數據合并，得到合并數據流，包括：

采用Union操作對所述至少兩個維度的實時數據流進行數據合并，得到所述合并數據流。

在本申請的一個實施例中，所述在預設時段內分別對多個維度的實時數據流進行數據統計，得到多個維度的統計數據之前，所述方法還包括：

從第二數據庫中獲取預設數據維表，所述預設數據維表中記錄多個預設目標對象；

根據所述預設數據維表，確定所述目標對象是否為預設目標對象；

若所述目標對象為所述預設目標對象，則執行所述數據統計的步驟。

在本申請的一個實施例中，若所述目標對象為預設目標對象，所述方法還包括：

分別對所述多個維度的實時數據流進行數據過濾，得到過濾后的多個維度的數據流，每個維度的數據流包括所述數據流中的有效數據。

在本申請的一個實施例中，所述在預設時段內分別對多個維度的實時數據流進行數據統計，得到多個維度的統計數據之前，所述方法還包括：