[發明專利]文件拆分方法、裝置、計算機設備和存儲介質有效
| 申請號: | 201810106722.3 | 申請日: | 2018-02-02 |
| 公開(公告)號: | CN108304554B | 公開(公告)日: | 2020-07-28 |
| 發明(設計)人: | 古立夫;周承亮;朱勝元;黃克海;柳水泉;石蕓 | 申請(專利權)人: | 平安證券股份有限公司 |
| 主分類號: | G06F16/16 | 分類號: | G06F16/16;G06F16/182;G06F16/14;G06Q40/04 |
| 代理公司: | 廣州華進聯合專利商標代理有限公司 44224 | 代理人: | 謝曲曲 |
| 地址: | 518048 廣東省深圳市福*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 文件 拆分 方法 裝置 計算機 設備 存儲 介質 | ||
1.一種文件拆分方法,所述方法包括:
獲取多個待拆分文件,識別多個待拆分文件之間的關聯度;
比較多個待拆分文件的相似度,根據相似度對相關的多個待拆分文件進行排序,根據排序確定相關的多個待拆分文件為不同的優先等級,并將不相關的多個待拆分文件確定為相同的優先等級;
識別多個待拆分文件的文件類型,根據所述文件類型獲取對應的拆分規則;所述拆分規則包括多個拆分維度;
根據所述拆分規則和所述優先等級,調用多線程對多個待拆分文件進行拆分,得到每個待拆分文件在不同拆分維度的多個子文件;
對多個所述子文件分別添加對應的維度標識;
根據所述維度標識,將多個所述子文件發送至相應的結算設備。
2.根據權利要求1所述的方法,其特征在于,獲取多個待拆分文件的步驟包括:接收登記設備發送的多個目標文件,將多個目標文件存儲至目標數據庫;
在所述目標數據庫檢測是否存在結束標識符;
當存在所述結束標識符時,根據接收時序在所述目標數據庫提取所述結束標識符與上一個結束標識符之間的目標文件,將提取到的目標文件作為待拆分文件。
3.根據權利要求1所述的方法,其特征在于,根據所述拆分規則和所述優先等級,調用多線程對多個待拆分文件進行拆分的步驟,包括:
當所述待拆分文件的文件類型為第一類型時,調用預設的拆分接口,調用多線程利用所述拆分接口對相應待拆分文件進行拆分;
當所述待拆分文件的文件類型為第二類型時,獲取預設的多個拆分維度分別對應的拆分表達式,調用多線程對相應待拆分文件進行遍歷,將每個拆分表達式與所述待拆分文件進行匹配,根據匹配結果對所述待拆分文件進行拆分。
4.根據權利要求1所述的方法,其特征在于,根據所述拆分規則和所述優先等級,調用多線程對多個待拆分文件進行拆分的步驟,包括:
計算多個待拆分文件分別對應的數據量;
對指定的多個拆分終端的負載進行監測;
獲取預設的數據量和負載的最優匹配文件,根據最優匹配文件確定指定的多個拆分終端分別可以拆分的待拆分文件的總數據量;
根據所述總數據量以及所述關聯度,對多個待拆分文件進行分組;
將多組待拆分文件分別分配至相應拆分終端,使所述拆分終端根據所述優先等級,從不同拆分維度對相應待拆分文件進行拆分;
接收所述拆分終端返回的所述待拆分文件在不同拆分維度的多個子文件。
5.根據權利要求1~4任意一項所述的方法,其特征在于,所述待拆分文件包括多條清算記錄;相鄰的兩條清算記錄采用分隔符進行分隔;所述根據所述拆分規則和所述優先等級,調用多線程對多個待拆分文件進行拆分的步驟包括:
計算多個待拆分文件分別對應的數據量,檢測所述數據量是否超過閾值;
當所述數據量超過閾值時,獲取預設的目標數據量,根據所述目標數據量確定每個待拆分文件的拆分位置;
檢測每個拆分位置是否位于相鄰分隔符之間;
當所述拆分位置位于一個分隔符處時,在所述拆分位置對相應待拆分文件進行拆分,得到所述待拆分文件對應的多個中間文件;
當所述拆分位置位于相鄰分隔符之間時,在所述相鄰分隔符中任意一個分隔符處對相應待拆分文件進行拆分,得到所述待拆分文件對應的多個中間文件;
根據所述拆分規則和所述優先等級,調用多線程對多個中間文件進行拆分。
6.根據權利要求1所述的方法,其特征在于,將多個所述子文件發送至相應的結算設備的步驟,包括:
對拆分得到的多個子文件的總數據量進行校驗;
對拆分得到的多個子文件分別對應清算記錄的總數量進行校驗;
獲取預設的多個關鍵字段,在拆分得到的多個子文件提取關鍵字段,對提取到的關鍵字段與預設的關鍵字段進行匹配;
當多個子文件的總數據量以及對應清算記錄的總數量分別校驗通過,且提取到的關鍵字段與預設的關鍵字段匹配成功時,將多個所述子文件發送至相應的結算設備。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于平安證券股份有限公司,未經平安證券股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810106722.3/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:數據遷移方法、裝置、計算機設備和存儲介質
- 下一篇:分布式地圖數據處理方法





