[發明專利]數據存儲系統及其數據存儲方法

在審

• 申請號: 202011602616.8
• 申請日: 2020-12-29
• 公開（公告）號: CN112667165A
• 公開（公告）日: 2021-04-16
• 發明（設計）人: 劉宇洋;譚德輝;謝浪濤
• 申請（專利權）人: 湖南博匠信息科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 黃恕

本申請涉及一種數據存儲系統包括依次連接的操作系統模塊、實時處理模塊以及文件管理模塊；所述實時處理模塊接收數據流，所述操作系統模塊接收控制流，并將所述控制流轉發至所述實時處理模塊，所述實時處理模塊根據所述文件管理模塊反饋的存儲地址，將所述數據流以及所述控制流異步存儲至所述存儲地址對應的磁盤空間。整個過程中，采用三個獨立的模塊獨立進行處理，針對數據流和控制流分別采用操作系統模塊、實時處理模塊對接，并且在進行存儲時采用異步的方式將數據流以及所述控制流存儲至磁盤空間，避免傳統存儲方式中同步處理中需要排隊等待的缺陷，可以實現數據的高效接收與存儲。另外，本申請還提供應用于該數據存儲系統的數據存儲方法。

技術領域

本申請涉及數據存儲技術領域，特別是涉及一種數據存儲系統及其數據存儲方法。

背景技術

隨著科學技術的進步，數字化處理已經深入到人們生活的方方面面，給人們生產、生活帶來便利。因此，如何實現數據的高速存儲已經成為需要解決的難題。

數字化的推廣應用，必然帶來大量數據產生(采集)和存儲。以應用于記錄儀為例。目前記錄儀廣泛應用與多種圖像監控的應用場景，隨著圖像采集技術的發展，記錄儀記錄圖像清晰度以及幀數也越來越大，記錄儀需要在短時間內記錄大量的高速數據，隨著高速數據采集速率增加，以及對這些數據有實時存儲進行事后分析的需求，對實時數據記錄儀的實時性和記錄帶寬提出了更高性能的要求。

因此，如何提供一種適用于高速數據的數據存儲方案已經成為目前需要解決的技術難題。

發明內容

基于此，有必要針對上述技術問題，提供一種數據存儲系統及其數據存儲方法。

一種數據存儲系統，包括依次連接的操作系統模塊、實時處理模塊以及文件管理模塊；

所述實時處理模塊接收數據流，所述操作系統模塊接收控制流，并將所述控制流轉發至所述實時處理模塊，所述實時處理模塊根據所述文件管理模塊反饋的存儲地址，將所述數據流以及所述控制流異步存儲至所述存儲地址對應的磁盤空間。

在其中一個實施例中，所述文件管理模塊劃設預設初始磁盤空間，將所述預設初始磁盤空間對應的存儲地址發送至所述實時處理模塊；所述實時處理模塊檢測所述預設初始磁盤空間內存儲的數據量，當存儲的數據量大于預設存儲閾值時，發送磁盤重新分配請求至所述文件管理模塊，所述文件管理模塊將新分配的所述預設初始磁盤空間對應的存儲地址反饋至所述實時處理模塊。

在其中一個實施例中，所述文件管理模塊以消息隊列的形式與所述實時處理模塊交互；

當所述操作系統模塊接收到控制流時，發送文件創建請求至所述實時處理模塊，所述實時處理模塊發送文件接口調用請求至所述文件管理模塊，所述文件管理模塊調用文件接口，分配連續的預設初始磁盤空間，反饋所述預設初始磁盤空間對應的存儲地址所述實時處理模塊，所述實時處理模塊將接收到的數據流和控制流異步存儲至所述預設初始磁盤空間，檢測所述預設初始磁盤空間內存儲的數據量，當存儲的數據量大于預設存儲閾值時，發送磁盤重新分配請求至所述文件管理模塊，所述文件管理模塊將新分配的所述預設初始磁盤空間對應的存儲地址反饋至所述實時處理模塊。

在其中一個實施例中，所述實時處理模塊包括用于搬運數據的數據流控制核、用于管理磁盤陣列的磁盤管理核以及用于根據管理所述數據流控制核與所述磁盤管理核工作的轉發與控制核；

所述數據流控制核、所述轉發與控制核以及所述磁盤管理核依次連接，所述數據流控制核接收數據流，所述轉發與控制核分別與所述操作系統模塊以及所述文件管理模塊連接，所述磁盤管理核與外部磁盤連接。

在其中一個實施例中，所述數據流控制核、所述轉發與控制核以及所述磁盤管理核以軟核形式設置于同一塊FPGA(Field Programmable Gate Array，現場可編程邏輯門陣列)上，所述數據流控制核、所述轉發與控制核以及所述磁盤管理核通過共享內存以消息隊列的形式進行交互。