[發(fā)明專利]數(shù)據(jù)處理方法及數(shù)據(jù)處理系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201310535210.6
• 申請日: 2013-11-01
• 公開（公告）號: CN104618304A
• 公開（公告）日: 2015-05-13
• 發(fā)明（設計）人: 魏新喆;任澤全;孫曉軍
• 申請（專利權）人: 杭州華三通信技術有限公司
• 主分類號: H04L29/06
• 分類號: H04L29/06;H04L12/70;G06F9/50
• 代理公司: 北京德琦知識產(chǎn)權代理有限公司 11018
• 代理人: 楊春香;宋志強

1.一種數(shù)據(jù)處理系統(tǒng)，其特征在于，所述數(shù)據(jù)處理系統(tǒng)包括：

業(yè)務邏輯層模塊，用于接收到任一網(wǎng)絡設備轉發(fā)的應用報文時，對所述應用報文的應用進行分類識別，并依據(jù)識別結果決策出對所述應用報文進行的處理操作；以及接收數(shù)據(jù)處理層模塊反饋的處理結果，并依據(jù)處理結果決策出對應的處理操作；

數(shù)據(jù)處理層模塊，包括單任務讀/寫（I/O）并發(fā)處理模塊和檢索模塊；

其中，單任務I/O并發(fā)處理模塊，用于在所述業(yè)務邏輯層模塊決策出的處理操作為針對單任務的I/O處理操作時，控制單任務的I/O并發(fā)處理，并在執(zhí)行完單任務的I/O并發(fā)處理后，會將最終的處理結果反饋給業(yè)務邏輯層模塊；

檢索模塊，用于在所述業(yè)務邏輯層模塊決策出的處理操作為數(shù)據(jù)檢索時，執(zhí)行數(shù)據(jù)檢索以找到最終的檢索結果，并將最終的檢索結果反饋給業(yè)務邏輯層模塊。

2.根據(jù)權利要求1所述的系統(tǒng)，其特征在于，

所述業(yè)務邏輯層模塊接收的所述應用報文是由所述網(wǎng)絡設備在所述應用報文對應的處理滿足設定條件時發(fā)送的；

其中，所述設定條件為所述應用報文對應的處理占用所述網(wǎng)絡設備的CPU資源大于設定閾值。

3.根據(jù)權利要求1所述的系統(tǒng)，其特征在于，所述業(yè)務邏輯層模塊利用預先針對至少一個應用協(xié)議建立的應用協(xié)議模型對所述應用報文的應用進行分類識別，和/或，

所述業(yè)務邏輯層模塊對所述應用報文的數(shù)據(jù)特征進行識別，并通過預設的具有狀態(tài)的特征狀態(tài)機對所述應用報文的數(shù)據(jù)特征進行跟蹤，以精確識別出所述應用報文的應用。

4.根據(jù)權利要求1所述的系統(tǒng)，其特征在于，所述數(shù)據(jù)處理層模塊采用一個主節(jié)點Master和至少一個數(shù)據(jù)節(jié)點Slave相結合的架構實現(xiàn)；

所述單任務I/O并發(fā)處理模塊包括：分布在所述Master上的存儲管理平臺、存儲客戶端Client；以及包括分布在每一Slave上的存儲客戶端、對象存儲模塊；

所述存儲管理平臺，用于管理整個文件系統(tǒng)；

所述Master上的存儲客戶端，用于同所述存儲管理平臺交互，確定需要執(zhí)行單任務I/O并發(fā)處理的對象；

每一Slave上的存儲客戶端，用于提供文件系統(tǒng)的訪問，并與對象存儲模塊進行文件數(shù)據(jù)的交互執(zhí)行I/O并發(fā)處理；

每一Slave上的對象存儲模塊是以對象為基本單位進行數(shù)據(jù)存儲，而對象對應的元數(shù)據(jù)存放于對象存儲模塊相關聯(lián)的元數(shù)據(jù)存儲模塊上；

所述檢索模塊包括：分布在Master上的作業(yè)調度管理模塊、特征匹配模塊、以及分布在各個Slave上的各個作業(yè)模塊；

Master上的存儲客戶端在進行數(shù)據(jù)檢索時，提交檢索作業(yè)至作業(yè)調度管理模塊；

所述作業(yè)調度管理模塊接收到檢索作業(yè)，將所述檢索作業(yè)調度分配至一個以上作業(yè)模塊；

所述作業(yè)模塊，接收所述作業(yè)調度管理模塊的調度，并從對象存儲模塊中獲取對應的特征數(shù)據(jù)；

特征匹配模塊，用于對所述作業(yè)模塊獲取的所述特征數(shù)據(jù)進行映射化簡運算得到最終的檢索結果，并返回給所述網(wǎng)絡設備。

5.根據(jù)權利要求4所述的系統(tǒng)，其特征在于，所述數(shù)據(jù)處理層模塊中，Master與Slave之間、Slave與Slave之間采用硬鏈接的方式進行連接；

其中，所述Master與Slave之間采用硬鏈接的方式進行連接為：所述Master與Slave之間直接通信，不由第三方設備轉發(fā)；

Slave與Slave之間采用硬鏈接的方式進行連接為：Slave與Slave之間直接通信，不由第三方設備轉發(fā)。