[發明專利]數據文件的處理方法和裝置、存儲介質、電子裝置

在審

• 申請號: 202110349433.8
• 申請日: 2021-03-31
• 公開（公告）號: CN112925759A
• 公開（公告）日: 2021-06-08
• 發明（設計）人: 王媛媛
• 申請（專利權）人: 北京金山云網絡技術有限公司
• 主分類號: G06F16/174
• 分類號: G06F16/174
• 代理公司: 北京華夏泰和知識產權代理有限公司 11662
• 代理人: 曾軍

1.一種數據文件的處理方法，其特征在于，包括：

獲取多個初始文件的文件數量，其中，所述初始文件中記錄有物聯網系統中的物聯網設備發送的業務數據；

在所述文件數量達到目標閾值的情況下，獲取每個所述初始文件的文件屬性，其中，所述文件屬性用于表示所述初始文件在目標屬性上的屬性值；

根據所述多個初始文件的文件屬性對所述多個初始文件進行合并，得到目標文件，其中，所述目標文件的文件數量少于所述多個初始文件的文件數量，所述目標文件中記錄的業務數據的數據量不大于所述多個初始文件中記錄的業務數據的數據量。

2.根據權利要求1所述的方法，其特征在于，根據所述多個初始文件的文件屬性對所述多個初始文件進行合并，得到目標文件包括：

獲取配置文件中為文件合并配置的目標合并方案，其中，所述配置文件用于保存在配置界面中接收到的合并方案，所述配置界面是第一服務器提供的；

根據所述多個初始文件的文件屬性，采用所述目標合并方案對所述多個初始文件進行合并，得到所述目標文件。

3.根據權利要求2所述的方法，其特征在于，根據所述多個初始文件的文件屬性，采用所述目標合并方案對所述多個初始文件進行合并，得到所述目標文件包括：

按照文件屬性中記錄的文件大小從所述多個初始文件中獲取第一文件，其中，所述第一文件的文件大小不大于第二文件的文件大小，所述多個初始文件包括所述第一文件和所述第二文件；

從各個所述第一文件中獲取所記錄的業務數據；

在所有所述第一文件中記錄的業務數據的數據量不大于目標閾值的情況下，將所有所述第一文件中記錄的業務數據寫入同一第三文件；或在所有所述第一文件中記錄的業務數據的數據量大于所述目標閾值的情況下，將所有所述第一文件中記錄的業務數據寫入多個所述第三文件，其中，任意一個所述第三文件中記錄的業務數據的數據量不大于所述目標閾值且任意兩個所述第三文件中記錄的業務數據不重復；

將所述第二文件和所述第三文件作為所述目標文件。

4.根據權利要求2所述的方法，其特征在于，根據所述多個初始文件的文件屬性，采用所述目標合并方案對所述多個初始文件進行合并，得到所述目標文件包括：

從各個所述初始文件中獲取所記錄的物聯網業務的業務數據并從文件屬性中獲取記錄的該業務數據的版本和該業務數據的操作記錄；

按照如下方式對從所述初始文件中獲取的業務數據進行數據操作：在操作記錄表示刪除數據的情況下，刪除該操作記錄所指示的業務數據；在操作記錄表示新增數據的情況下，將該操作記錄所指示的多個業務數據合并；在存在相同的多個業務數據的情況下，保留多個業務數據中版本最新的業務數據；

將進行數據操作后的業務數據寫入同一個所述目標文件。

5.根據權利要求1所述的方法，其特征在于，在獲取多個初始文件的文件數量之前，所述方法還包括：

在將所述物聯網設備發送的業務數據寫入至內存上的所述初始文件時，將寫入時間和數據源記錄至操作日志中。

6.根據權利要求5所述的方法，其特征在于，在第一服務器根據所述多個初始文件的文件屬性對所述多個初始文件進行合并，得到目標文件的過程中，所述方法還包括：

在合并成功的情況下，從所述操作日志中刪除已經合并成功的所述初始文件的記錄；

在合并失敗的情況下，將對所述多個初始文件進行合并的失敗記錄寫入所述操作日志。

7.根據權利要求6所述的方法，其特征在于，在將對所述多個初始文件進行合并的失敗記錄寫入所述操作日志之后，所述方法還包括：

按照所述操作日志中記錄的數據源獲取所述多個初始文件中記錄的業務數據或從第二服務器獲取所述多個初始文件，其中，所述第二服務器為所述第一服務器的備用服務器；

再次執行根據所述多個初始文件的文件屬性對所述多個初始文件進行合并的操作，得到所述目標文件。