[發明專利]一種多通道高速數據加載方法及其系統

在審

• 申請號: 201810441905.0
• 申請日: 2018-05-10
• 公開（公告）號: CN108696345A
• 公開（公告）日: 2018-10-23
• 發明（設計）人: 陳珺
• 申請（專利權）人: 安徽雷索信息科技有限公司
• 主分類號: H04L5/00
• 分類號: H04L5/00
• 代理公司: 昆明合眾智信知識產權事務所 53113
• 代理人: 楊俊達

本發明提供一種多通道高速數據加載方法及其系統，其中一種多通道高速數據加載方法，包括以下步驟：S1，獲取前端設備的數據信息；S2，根據獲取的數據信息來識別數據信息的字節數；S3，對字節數較大的數據信息進行拆分傳輸；S4，拆分后的數據信息分路傳輸并對分步接收到的數據信息進行加載；S5，完成加載的數據信號進行存儲。本發明通過數據識別模塊來計算數據信息的字節數，并根據數據信息的字節數來判斷當前數據信息是否需要進行多通道傳輸，進而能夠智能化的加載數據并提高加載的速度，本發明通過數據拆分模塊對數據信息進行拆分以及采用多通道的方式對數據進行傳輸，使得數據信息能夠快速的傳輸至寄存器內進行加載。

技術領域

本發明涉及數據加載技術領域，具體為一種多通道高速數據加載方法及其系統。

背景技術

隨著互聯網技術的廣泛應用，在科技行業，以及傳統行業與互聯網行業的結合的大背景下，各個行業的數據的增長呈現指數級，這些數據含有寶貴的價值，而在數據進行顯示時需要進行加載處理，所以如何快速對數據信息進行加載顯得尤為重要。

公開號為CN105354320A提供了一種快速加載多個數據文件的方法，所述方法包括：獲取數據文件的基本信息；根據獲取的數據文件的基本信息加載所述數據文件。此發明不必等待獲取到全部數據文件的基本信息，就開始對已經獲取到基本信息的數據文件進行加載，因此可以提高集群數據庫加載工具的性能，有效減少用戶的等待時間，但是此方法在進行傳輸的過程中還是采用單條通道進行傳輸進而影響傳輸速度。

發明內容

本發明的目的在于提供一種多通道高速數據加載方法及其系統，以解決上述背景技術中提出的問題。

為實現上述目的，本發明提供如下技術方案：

一種多通道高速數據加載方法，包括以下步驟：

S1，獲取前端設備的數據信息；

S2，根據獲取的數據信息來計算數據信息的字節數；

S3，對字節數較大的數據信息進行拆分傳輸；

S4，拆分后的數據信息進行分路傳輸并對接收到的數據信息分步的進行加載；

S5，完成加載的數據信息進行存儲。

優選的，所述S1具體為，通過數據采集模塊采集前端設備的數據信息。

優選的，所述S2具體為，通過數據識別模塊對采集的數據信息的字節數進行計算，并根據邏輯控制模塊來判斷計算出的數據信息的字節數是否到達分路傳輸的閾值。

優選的，所述S3具體為，通過數據拆分模塊對字節數較大的數據信息進行拆分，并進行分路傳輸。

優選的，所述S4具體為，通過數據處理模塊內的片內寄存器對拆分的數據信息進行寄存，其中拆分的數據信息分步的傳輸至片內寄存器內，并對拆分的數據信息進行分步加載。

優選的，所述S5具體為，數據信息分步加載完成后通過數據處理模塊將完整的數據信息寫入存儲模塊內。

一種多通道高速數據加載系統，包括前端設備、數據采集模塊、數據識別模塊、邏輯控制模塊、數據處理模塊、數據拆分模塊、存儲模塊和后端設備，其中：

所述數據識別模塊用于計算數據信息的字節數；

所述邏輯控制模塊用于控制小字節的數據信號直接傳輸至數據處理模塊內；

所述數據拆分模塊用于對數據信息進行拆分傳輸；

所述數據處理模塊用于對拆分的數據信息進行緩存并將緩存的數據信號進行分步加載，對加載的數據信號進行傳輸；