[發明專利]一種數據處理系統和方法

在審

• 申請號: 201710308050.X
• 申請日: 2017-05-04
• 公開（公告）號: CN107133102A
• 公開（公告）日: 2017-09-05
• 發明（設計）人: 李福文
• 申請（專利權）人: 深圳大普微電子科技有限公司
• 主分類號: G06F9/50
• 分類號: G06F9/50;G06F17/30
• 代理公司: 深圳市精英專利事務所44242
• 代理人: 劉貽盛

技術領域

本發明涉及數據處理技術領域，尤其涉及一種數據處理系統和方法。

背景技術

在互聯網的大規模數據處理中，數據的壓縮、解壓縮、備份是非常重要且常用的手段，當前數據處理系統處理數據壓縮、解壓縮、備份一般通過軟件算法進行處理，一般的流程為：1)應用軟件下達指令；2)CPU(Central ProcessingUnit，中央處理器)響應該指令，去存儲器中指定的地方(如Flash、硬盤(HardDisk)等)獲取數據；3)CPU進行壓縮、解壓縮、或備份處理；4)將處理結果儲存到目標地址。

這種傳統的數據處理系統采用軟件算法利用CPU對數據進行處理，且CPU搬移數據采單突發(single burst)形式，傳統的數據處理系統具有以下缺點：1)消耗大量的CPU及總線(BUS)的資源；2)消耗大量的CPU及總線的資源必將消耗更多的電量；3)消耗大量的CPU及總線的資源必將消耗更多的時間。總的來說目前采用軟件算法進行數據處理需要占用大量的CPU資源，處理效率比較低，特別是在處理大量數據時，軟件算法的缺點將更加明顯。

發明內容

本發明所要解決的技術問題在于提出一種數據處理系統和方法，大大地提高了大數據處理的處理效率。

為解決上述技術問題，本發明采用以下技術方案：

一方面提供了一種數據處理系統，包括CPU和存儲器，還包括有一硬件電路處理模塊；

所述CPU，用于接收用戶輸入的處理指令，根據所述處理指令從存儲器中獲取源數據，并將所述源數據和第一數據處理請求發送給硬件電路處理模塊；

所述硬件電路處理模塊，用于接收所述源數據和第一數據處理請求，根據所述第一數據處理請求對所述源數據進行數據處理，并將數據處理結果返回給存儲器；

所述存儲器，用于將硬件電路處理模塊返回的數據處理結果存儲到目標地址；

其中，所述第一數據處理請求為壓縮請求、解壓縮請求或備份請求。

其中，還包括搜索引擎和主機；

CPU還用于根據所述處理指令向搜索引擎發送第二數據處理請求；硬件電路處理模塊還將數據處理結果發送給搜索引擎；

搜索引擎用于根據所述第二數據處理請求對數據處理結果進行處理，并將處理結果發送給主機；

所述第二數據處理請求為搜索請求或不處理請求。

其中，所述存儲器為Flash。

其中，所述存儲器為硬盤。

其中，所述硬件電路處理模塊基于DSP實現。

其中，所述源數據和所述數據處理結果通過多突發的形式進行傳輸。

另一方面提供了一種數據處理方法，該數據處理方法包括：

CPU接收用戶輸入的處理指令，根據所述處理指令從存儲器中獲取源數據，并將所述源數據和第一數據處理請求發送給硬件電路處理模塊；

硬件電路處理模塊接收所述源數據和第一數據處理請求，根據所述第一數據處理請求對所述源數據進行數據處理，并將數據處理結果返回給存儲器；

存儲器將硬件電路處理模塊返回的數據處理結果存儲到目標地址；

其中，所述第一數據處理請求為壓縮請求、解壓縮請求或備份請求。

其中，CPU接收用戶輸入的處理指令之后還包括：根據所述處理指令向搜索引擎發送第二數據處理請求；

所述硬件電路處理模塊接收所述源數據和第一數據處理請求，根據所述第一數據處理請求對所述源數據進行數據處理之后，還包括：

硬件電路處理模塊將數據處理結果發送給搜索引擎；

搜索引擎根據所述第二數據處理請求對數據處理結果進行處理，并將處理結果發送給主機；所述第二數據處理請求為搜索請求或不處理請求。

與現有技術相比，本發明的有益效果為：本發明通過外加的硬件電路處理模塊對數據進行壓縮、解壓縮和備份處理，大大地提高大數據處理的處理效率，節省了大量的CPU資源，也達到了省時、省電的效果。

附圖說明

為了更清楚地說明本發明實施例中的技術方案，下面將對本發明實施例描述中所需要使用的附圖作簡單的介紹，顯而易見地，下面描述中的附圖僅僅是本發明的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動的前提下，還可以根據本發明實施例的內容和這些附圖獲得其他的附圖。

圖1是本發明具體實施方式提供的一種數據處理系統的實施例的結構框圖。

圖2是本發明具體實施方式提供的一種數據處理系統的另一實施例的結構框圖。