[發明專利]一種文件處理方法、裝置、計算機可讀存儲介質及服務器

在審

• 申請號: 202210072391.2
• 申請日: 2022-01-21
• 公開（公告）號: CN114398332A
• 公開（公告）日: 2022-04-26
• 發明（設計）人: 劉芳君
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06F16/176
• 分類號: G06F16/176;G06F16/182;G06F16/13
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 劉永康

1.一種文件處理方法，其特征在于，包括：

通過預設的文件輪詢作業節點從指定的目標文件源中獲取文件信息，根據獲取的文件信息生成對應的文件任務信息，并將生成的文件任務信息存儲入預設的文件任務表中；

通過預設的文件下載作業節點讀取所述文件任務表中的文件任務信息，并根據讀取的文件任務信息從所述目標文件源中下載對應的文件；

通過預設的文件校驗作業節點調度預設的第一數目的文件校驗作業分片分別對下載的文件進行校驗操作；

通過預設的文件入庫作業節點調度預設的第二數目的文件入庫作業分片分別對校驗操作后的文件進行文件解析，并將得到的文件解析信息插入預設的庫表中；

通過預設的文件上傳作業節點調度預設的第三數目的文件上傳作業分片分別將所述庫表中的文件解析信息生成本地文件，并將生成的本地文件上傳至預設的分布式文件系統。

2.根據權利要求1所述的文件處理方法，其特征在于，所述根據獲取的文件信息生成對應的文件任務信息，包括：

將獲取的文件信息與在預設文件配置表中注冊的文件配置數據進行正則匹配；

若匹配不成功，則在預設的異常信息表中記錄異常信息；

若匹配成功，則提取匹配到的文件配置數據中的輪詢標志位；

若所述輪詢標志位為預設的第一取值，則在所述異常信息表中記錄異常信息；

若所述輪詢標志位為預設的第二取值，則根據匹配到的文件配置數據生成文件任務信息。

3.根據權利要求1所述的文件處理方法，其特征在于，所述將生成的文件任務信息存儲入預設的文件任務表中，包括：

在所述文件任務表中查詢是否存在與生成的文件任務信息相同的文件任務信息；

若在所述文件任務表中存在相同的文件任務信息，則在預設的異常信息表中記錄異常信息；

若在所述文件任務表中不存在相同的文件任務信息，則將生成的文件任務信息存儲入預設的文件任務表中。

4.根據權利要求1所述的文件處理方法，其特征在于，所述讀取所述文件任務表中的文件任務信息，并根據讀取的文件任務信息從所述目標文件源中下載對應的文件，包括：

根據預設的讀取條件讀取所述文件任務表中的文件任務信息；

提取讀取的文件任務信息中的下載標志位；

若所述下載標志位為預設的第一取值，則將讀取的文件任務信息的狀態更新為跳過下載狀態；

若所述下載標志位為預設的第二取值，則對所述目標文件源中對應的文件進行完整性檢查；

若完整性檢查未通過，則在預設的異常信息表中記錄異常信息；

若完整性檢查通過，則從所述目標文件源中下載對應的文件，并將下載的文件上傳至所述分布式文件系統的指定目錄中；

向所述目標文件源發送轉移文件指令，將對應的源文件轉移至預設的備份目錄中。

5.根據權利要求1所述的文件處理方法，其特征在于，所述調度預設的第一數目的文件校驗作業分片分別對下載的文件進行校驗操作，包括：

根據各個文件校驗作業分片的分片號和各個下載的文件的文件號，使用預設的分片算法確定各個文件校驗作業分片分別對應的文件任務信息列表；

調度各個文件校驗作業分片分別遍歷各自對應的文件任務信息列表，對文件任務信息列表中的各個文件進行校驗操作；

所述對文件任務信息列表中的各個文件進行校驗操作，包括：

提取目標文件任務信息中的校驗標志位；所述目標文件任務信息為文件任務信息列表中的任意一條文件任務信息；

若所述校驗標志位為預設的第一取值，則將所述目標文件任務信息的狀態更新為跳過校驗狀態；

若所述校驗標志位為預設的第二取值，則從所述分布式文件系統中獲取目標文件；所述目標文件為與所述目標文件任務信息對應的文件；

分別解析第一參數和第二參數；所述第一參數為所述目標文件任務信息中的參數，所述第二參數為所述目標文件中的參數；

若所述第一參數與所述第二參數不一致，則在預設的異常信息表中記錄異常信息；

若所述第一參數與所述第二參數一致，則將所述目標文件任務信息的狀態更新為校驗完成狀態。