[發明專利]特征庫數據處理方法及裝置

有效

• 申請號: 202110572888.6
• 申請日: 2021-05-25
• 公開（公告）號: CN113342410B
• 公開（公告）日: 2022-09-06
• 發明（設計）人: 張攀;王鏡清;趙燁
• 申請（專利權）人: 山石網科通信技術股份有限公司
• 主分類號: G06F9/445
• 分類號: G06F9/445;G06F9/50
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 周春枚

本發明公開了一種特征庫數據處理方法及裝置。其中，該方法包括：獲取多個數據源的多個不同優先級的數據；將多個數據源的數據按照優先級的高低順序進行排列，生成特征庫，其中，相同優先級的多個數據源的數據，相互交錯排列；通過加載特征庫的設備的資源，加載特征庫。本發明解決了相關技術中的特征庫數據在加載時，由于資源有限，容易導致部分優質數據無法加載的情況的技術問題。

技術領域

本發明涉及數據處理領域，具體而言，涉及一種特征庫數據處理方法及裝置。

背景技術

基于多特征源的特征庫生成是當前網絡安全設備流行的一種特征庫生成方式。特征庫生成使用的特征源包括合作商規則、自研規則、第三方公開規則等，網絡安全廠商根據自己制定的生成策略生成各類特征庫并發布，供網絡安全設備下載使用以實現相應的防護功能。

特征庫生成主要包括四個步驟：規則獲取、規則處理、規則轉換和特征庫發布。多源特征庫生成的目標是：按照統一的優先級定義，選取不同特征源的特征集整合為一個完整的特征庫，并期望加載特征庫的設備盡可能加載到各個源的高優先級特征集。

對于資源受限的網絡安全設備，加載特征庫時可能無法加載全量特征庫，針對這種情況，一般有兩種做法(為方便說明，我們假定當前多個源的規則集均為相同優先級)：1.加載至本機設置的規則上限后截斷，圖1是現有技術的全量特征庫加載方式的示意圖，如圖1所示，圖中陰影部分表示設備加載后由于自身資源不足被截斷的特征集部分；2.生成多種規格的特征庫，圖2是現有技術的多規格特征庫加載方式的示意圖，如圖2所示，網絡安全設備可以根據自身資源限制情況選取規格合適的特征庫進行加載。

現有的兩種多源特征庫生成方案分別有以下特點：

生成全量特征庫并截斷加載的方案特點是：實現簡單，特征庫發布及維護容易，加載設備與特征庫規格低耦合，但對不同資源規格的設備適應性差，可能出現部分源的規則集完全未加載的情況。

生成多規格特征庫并選擇加載的方案特點是：實現復雜，需要增加額外的規格區分及生成邏輯，特征庫發布及維護較繁瑣，加載設備與特征庫規格高耦合，但對不同資源規格的設備適應性好，可以加載到所有源的高優先級規則集。

針對上述的問題，目前尚未提出有效的解決方案。

發明內容

本發明實施例提供了一種特征庫數據處理方法及裝置，以至少解決相關技術中的特征庫數據在加載時，由于資源有限，容易導致部分優質數據無法加載的情況的技術問題。

根據本發明實施例的一個方面，提供了一種特征庫數據處理方法，包括：獲取多個數據源的多個不同優先級的數據；將多個數據源的數據按照優先級的高低順序進行排列，生成特征庫，其中，相同優先級的多個數據源的數據，相互交錯排列；通過加載所述特征庫的設備的資源，加載所述特征庫。

可選的，獲取多個數據源的多個不同優先級的數據包括：獲取多個數據源的數據；通過預設的優先級度量規則，確定所述數據的優先級。

可選的，將多個數據源的數據按照優先級的高低順序進行排列，生成所述特征庫包括：確定所述特征庫中的數據存儲的步進值；確定多個數據源的權重；根據所述步進值，所述權重和所述優先級，生成所述特征庫。

可選的，根據所述步進值，所述權重和所述優先級，生成所述特征庫包括：確定同一優先級的多個數據源的數據；根據所述步進值和所述權重，確定多個數據源在一個步進值的數據單元中分別所占的數據量；從同一優先級的多個數據源的數據中，隨機選取多個數據源的所述數據量的數據，按照順序生成所述數據單元；根據多個數據單元生成所述特征庫。

可選的，確定所述特征庫中的數據存儲的步進值包括：確定加載所述特征庫的設備的多個不同規格的加載量；選取多個所述加載量的公約數，作為所述步進值。

可選的，所述步進值為多個所述加載量的最大公約數。