[發明專利]數據處理方法、裝置、計算機設備和存儲介質

在審

• 申請號: 202110230018.0
• 申請日: 2021-03-02
• 公開（公告）號: CN114996210A
• 公開（公告）日: 2022-09-02
• 發明（設計）人: 蔣乾;王展雄;郭棋林;高磊;馮可
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F16/13
• 分類號: G06F16/13;G06F16/172;G06F16/178;G06F16/182
• 代理公司: 華進聯合專利商標代理有限公司 44224
• 代理人: 董慧

1.一種數據處理方法，其特征在于，所述方法包括：

從實時更新的業務數據中獲取當前第一時間周期中的增量變更數據，根據獲取的增量變更數據生成當前第一時間周期的增量數據文件；

基于當前第二時間周期中的當前第一時間周期之前的各第一時間周期的增量數據文件，與上一個第二時間周期中的最后一個第一時間周期的第一歷史全量數據文件合并，獲得當前第一時間周期的第二歷史全量數據文件，所述第二時間周期包括至少兩個所述第一時間周期；所述第一歷史全量數據文件，是用以存儲生成時間在上一個第二時間周期中的最后一個第一時間周期的周期結束時間點之前的所有業務數據的文件，所述第二歷史全量數據文件，是用以存儲生成時間在當前第一時間周期的周期結束時間點之前的所有業務數據的文件。

2.根據權利要求1所述的方法，其特征在于，所述基于當前第二時間周期中的當前第一時間周期之前的各第一時間周期的增量數據文件，與上一個第二時間周期中的最后一個第一時間周期的第一歷史全量數據文件合并，獲得當前第一時間周期的第二歷史全量數據文件，包括：

將所述當前第一時間周期的增量數據文件與當前第二時間周期中的上一個第一時間周期的第一周期全量數據文件合并，獲得當前第一時間周期的第二周期全量數據文件；所述第一周期全量數據文件，是用以存儲生成時間在當前第二時間周期內、且在當前第二時間周期中的上一個第一時間周期的周期結束時間點之前的所有業務數據的文件，所述第二周期全量數據文件，是用以存儲生成時間在當前第二時間周期內、且在當前第一時間周期的周期結束時間點之前的所有業務數據的文件；

將所述第二周期全量數據文件與所述第一歷史全量數據文件合并，獲得當前第一時間周期的第二歷史全量數據文件。

3.根據權利要求2所述的方法，其特征在于，所述將所述當前第一時間周期的增量數據文件與當前第二時間周期中的上一個第一時間周期的第一周期全量數據文件合并，獲得當前第一時間周期的第二周期全量數據文件，包括：

在獲得了當前第二時間周期中的上一個第一時間周期的所述第一周期全量數據文件時，將所述當前第一時間周期的增量數據文件與當前第二時間周期中的上一個第一時間周期的第一周期全量數據文件合并，獲得當前第一時間周期的第二周期全量數據文件。

4.根據權利要求2所述的方法，其特征在于，所述將所述當前第一時間周期的增量數據文件與當前第二時間周期中的上一個第一時間周期的第一周期全量數據文件合并，獲得當前第一時間周期的第二周期全量數據文件，包括：

在所述當前第一時間周期的增量數據文件中的當前數據內容標識的當前字段標識的字段內容不為空時，將所述當前第一時間周期的增量數據文件中的所述當前數據內容標識的所述當前字段標識的字段內容，作為所述當前數據內容標識的所述當前字段標識的內容，同步到所述第二周期全量數據文件；

在所述當前第一時間周期的增量數據文件中的所述當前數據內容標識的所述當前字段標識的字段內容為空時，將所述第一周期全量數據文件中的所述當前數據內容標識的所述當前字段標識的字段內容，作為所述當前數據內容標識的所述當前字段標識的內容，同步到所述第二周期全量數據文件。

5.根據權利要求2所述的方法，其特征在于，所述將所述當前第一時間周期的增量數據文件與當前第二時間周期中的上一個第一時間周期的第一周期全量數據文件合并，獲得當前第一時間周期的第二周期全量數據文件，包括：

對所述當前第一時間周期的增量數據文件、以及所述當前第二時間周期中的上一個第一時間周期的第一周期全量數據文件中的目標文件進行合并，得到合并后文件，所述目標文件為文件大小小于或等于第一預定文件大小的文件；

基于所述當前第一時間周期的增量數據文件和所述第一周期全量數據文件中文件大小大于所述第一預定文件大小的文件，以及所述合并后文件，獲得當前第一時間周期的第二周期全量數據文件。