[發明專利]一種數據采集方法、裝置、電子設備及存儲介質

在審

• 申請號: 202111607890.9
• 申請日: 2021-12-23
• 公開（公告）號: CN114281648A
• 公開（公告）日: 2022-04-05
• 發明（設計）人: 劉海軍
• 申請（專利權）人: 北京奇藝世紀科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F11/34;H04W8/18
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 呂俊秀

1.一種數據采集方法，其特征在于，應用于移動端設備，所述方法包括：

從云端設備獲取目標任務的任務信息，所述任務信息中包括所述目標任務的埋點信息、數據篩選條件及時間窗口，所述云端設備用于對所述任務信息進行存儲；

根據所述埋點信息，確定所述目標任務的數據埋點，并從所述數據埋點獲取符合所述數據篩選條件的埋點數據，作為待處理數據；

按照所述時間窗口，對所述待處理數據進行聚合，得到聚合結果，并將所述聚合結果存儲為所述目標任務的數據文件。

2.根據權利要求1所述的方法，其特征在于，所述目標任務包括多個，所述根據所述埋點信息，確定所述目標任務的數據埋點，并從所述數據埋點獲取符合所述數據篩選條件的埋點數據，作為待處理數據，包括：

根據所述目標任務的埋點信息，生成每個數據埋點的分發索引，所述分發索引用于指示每個數據埋點與至少一個所述目標任務之間的對應關系；

對所述數據埋點進行監聽，根據所述分發索引，確定監聽到的埋點數據對應的目標任務；

判斷所述監聽到的埋點數據是否符合所述數據埋點對應的任一目標任務的數據篩選條件，若符合，則將監聽到的埋點數據作為所述任一目標任務的待處理數據。

3.根據權利要求1所述的方法，其特征在于，所述按照所述時間窗口，對所述待處理數據進行聚合，得到聚合結果，包括：

將所述任務信息的獲取時間作為起始時間，確定所述目標任務的多個時間窗口的截止時間；

當達到任一時間窗口的截止時間時，對所述任一時間窗口內獲取到的待處理數據進行聚合，得到聚合結果。

4.根據權利要求1所述的方法，其特征在于，所述任務信息中還包括第一聚合規則，所述按照所述時間窗口，對所述待處理數據進行聚合，得到聚合結果，包括：

按照所述時間窗口，根據所述第一聚合規則對所述待處理數據進行聚合，得到聚合結果；

其中，所述第一聚合規則包括以下至少一種：數據個數統計、最大值計算以及最小值計算。

5.根據權利要求1所述的方法，其特征在于，所述任務信息中還包括保存周期，所述將所述聚合結果存儲為所述目標任務的數據文件，包括：

在當前時間與上一次將所述聚合結果存儲至所述目標任務的數據文件的時間之間的時間差超出所述保存周期之后，將未被存儲的所述聚合結果存儲為所述目標任務的數據文件。

6.根據權利要求1所述的方法，其特征在于，所述任務信息中還包括預設操作，所述預設操作用于觸發對所述聚合結果的存儲，所述將所述聚合結果存儲為所述目標任務的數據文件，包括：

響應于所述預設操作，檢測所述目標任務的聚合結果是否發生更新；

若發生更新，則將更新后的所述聚合結果存儲為所述目標任務的數據文件。

7.根據權利要求1所述的方法，其特征在于，所述任務信息中還包括查詢時間及第二聚合規則，在所述按照所述時間窗口，對所述待處理數據進行聚合，得到聚合結果之后，所述方法還包括：

從所述聚合結果中獲取在所述查詢時間內的待查詢數據；

根據所述第二聚合規則，對所述待查詢數據進行聚合，得到查詢結果；

所述將所述聚合結果存儲為所述目標任務的數據文件，包括：

將所述聚合結果及所述查詢結果存儲為所述目標任務的數據文件。

8.根據權利要求7所述的方法，其特征在于，所述聚合結果中的每個數據均具有對應的鍵值對，所述根據所述第二聚合規則，對所述待查詢數據進行聚合，得到查詢結果，包括：

根據所述第二聚合規則，對所述待查詢數據的鍵值對進行聚合，得到查詢結果。