[發明專利]微服務體系下文件分布式寫入、讀取、處理機制及系統在審
| 申請號： | 202011088617.5 | 申請日： | 2020-10-13 |
| 公開（公告）號： | CN112256642A | 公開（公告）日： | 2021-01-22 |
| 發明（設計）人： | 葛良濤 | 申請（專利權）人： | 北京神州數字科技有限公司 |
| 主分類號： | G06F16/16 | 分類號： | G06F16/16;G06F16/172;G06F16/176;G06F16/182 |
| 代理公司： | 北京方韜法業專利代理事務所(普通合伙) 11303 | 代理人： | 馬麗蓮 |
| 地址： | 100000 北京市西*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 微服 體系 文件 分布式 寫入 讀取 處理 機制 系統 | ||
1.一種微服務體系下文件分布式寫入處理的機制，其特征在于，包括：
S110、根據業務需求配置文件類型、業務分類、單個文件記錄數、文件名稱及文件存放路徑信息；
S120、配置文件生成時機；
S130、運行時獲取待處理數據總數，并按配置的單個文件大小進行任務分段；記錄文件總條數、總文件數到校驗文件；
S140、按分段進行多個服務器多實例的并行文件寫入處理，并生成簽名文件,文件內容為文件記錄數；
S150、文件共享給其他微服務。
2.根據權利要求1所述的微服務體系下文件分布式寫入處理的機制，其特征在于，所述S130中，分段是可以獨立在多個微服務實例上執行的最小執行單元。
3.根據權利要求1所述的微服務體系下文件分布式寫入處理的機制，其特征在于，所述S150中，文件通過NAS/NFS高速共享存儲。
4.一種微服務體系下文件分布式讀取處理的機制，其特征在于，所述讀取處理的機制與權利要求1-3所述的微服務體系下文件分布式寫入處理的機制配套，包括：
S210、根據業務分類獲取文件類型及文件名稱，按文件分類校驗文件類型、文件個數、文件總記錄與各文件記錄數之和是否匹配；并按文件進行分段，分配給各個業務微服務執行實例；
S220、按分段進行多個服務器多實例的并行校驗簽名文件、校驗文件記錄數，通過后讀取文件并處理。
5.一種微服務體系下文件分布式處理的機制，其特征在于，包括權利要求1-3任一項所述的微服務體系下文件分布式寫入處理的機制以及權利要求4所述的微服務體系下文件分布式讀取處理的機制。
6.一種微服務體系下文件分布式寫入處理的系統，其特征在于，包括：
配置文件信息模塊，用于根據業務需求配置文件類型、業務分類、單個文件記錄數、文件名稱及文件存放路徑信息；
配置文件生成模塊，用于配置文件生成時機；
數據分段及校驗文件生成模塊，用于在運行時獲取待處理數據總數，并按配置的單個文件大小進行任務分段，記錄文件總條數、總文件數到校驗文件；
并行文件寫入處理及簽名文件生成模塊，用于按分段進行多個服務器多實例的并行文件寫入處理，并生成簽名文件,文件內容為文件記錄數；
文件共享模塊，用于將文件共享給其他微服務。
7.根據權利要求6所述的微服務體系下文件分布式寫入處理的系統，其特征在于，所述數據分段及校驗文件生成模塊中，分段是可以獨立在多個微服務實例上執行的最小執行單元。
8.根據權利要求6所述的微服務體系下文件分布式寫入處理的系統，其特征在于，所述文件共享模塊中，文件通過NAS/NFS高速共享存儲。
9.一種微服務體系下文件分布式讀取處理的系統，其特征在于，所述讀取處理的系統與權利要求6-8任一項所述的微服務體系下文件分布式寫入處理的系統配套，包括：
校驗及分段分配模塊，用于根據業務分類獲取文件類型及文件名稱，按文件分類校驗文件類型、文件個數、文件總記錄與各文件記錄數之和是否匹配；并按文件進行分段，分配給各個業務微服務執行實例；
校驗讀取處理模塊，用于按分段進行多個服務器多實例的并行校驗簽名文件、校驗文件記錄數，通過后讀取文件并處理。
10.一種微服務體系下文件分布式處理的系統，其特征在于，包括權利要求6-8任一項所述的微服務體系下文件分布式寫入處理的系統以及權利要求9所述的微服務體系下文件分布式讀取處理的系統。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于北京神州數字科技有限公司，未經北京神州數字科技有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202011088617.5/1.html，轉載請聲明來源鉆瓜專利網。
