[發明專利]一種管理數據的方法和系統

有效

• 申請號: 201711464034.6
• 申請日: 2017-12-28
• 公開（公告）號: CN108228101B
• 公開（公告）日: 2022-03-15
• 發明（設計）人: 郝海生;王鋒
• 申請（專利權）人: 北京盛和大地數據科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京華智則銘知識產權代理有限公司 11573
• 代理人: 陳向敏

本發明公開了一種管理數據的方法和系統，屬于數據存儲技術領域。所述方法包括：管理服務器接收目標非結構化數據的數據存儲請求，將所述目標非結構化數據傳輸給存儲服務器，所述存儲服務器根據預設的特征提取標準，提取所述目標非結構化數據的特征信息，生成目標特征文件，所述存儲服務器將所述目標特征文件存儲至熱存儲區，并將所述目標非結構化數據存儲至冷存儲區。采用本發明，可以提高數據管理的效率。

技術領域

本發明涉及數據存儲技術領域，特別涉及一種管理數據的方法和系統。

背景技術

隨著計算機、互聯網和數字媒體等技術的進一步發展，以文本、圖形、圖像、音頻、視頻等非結構化數據為主的信息急劇增加。非結構化數據是指數據結構不規則或不完整，沒有預定義的數據模型，無法通過數據庫二維邏輯表來表現的數據。

非結構化數據一般存儲在數據管理系統中的存儲服務器的磁盤陣列上或閃存陣列上。數據管理系統的管理服務器接收到外界對于某非結構化數據的檢索或分析等數據管理請求后，可以先從數據管理系統的存儲服務器中獲取非結構化數據，然后管理服務器可以對非結構化數據進行特征提取與分析等數據管理處理，再向外界反饋上述處理結果。

在實現本發明的過程中，發明人發現現有技術至少存在以下問題：

非結構化數據的數據量很大，在對其進行數據管理的過程中，存儲服務器和管理服務器間的非結構化數據的傳輸將占用大量的帶寬資源與計算資源，且需要花費大量傳輸時間，故而，數據管理的效率較低。

發明內容

為了解決現有技術的問題，本發明實施例提供了一種管理數據的方法和系統。所述技術方案如下：

第一方面，提供了一種管理數據的方法，所述方法包括：

管理服務器接收目標非結構化數據的數據存儲請求，將所述目標非結構化數據傳輸給存儲服務器；

所述存儲服務器根據預設的特征提取標準，提取所述目標非結構化數據的特征信息，生成目標特征文件；

所述存儲服務器將所述目標特征文件存儲至熱存儲區，并將所述目標非結構化數據存儲至冷存儲區。

可選的，所述存儲服務器根據預設的特征提取標準，提取所述目標非結構化數據的特征信息，生成目標特征文件，包括：

所述存儲服務器獲取所述目標非結構化數據的數據屬性；

所述存儲服務器根據預設的所述數據屬性對應的特征提取標準，提取所述目標非結構化數據的特征信息，生成目標特征文件。

可選的，所述目標特征文件中的特征信息的數據格式與所述目標非結構化數據的數據格式相同或者不同。

可選的，所述方法還包括：

所述管理服務器獲取數據查詢請求，將其中攜帶的查詢關鍵信息發送給存儲服務器；

所述存儲服務器確定與所述查詢關鍵信息相符的可選特征信息，并查找所述可選特征信息所屬的可選特征文件；

所述存儲服務器將所述可選特征文件反饋給所述管理服務器。

可選的，所述方法還包括：

如果不存在與所述查詢關鍵信息相符的可選特征信息，所述存儲服務器則確定所述查詢關鍵信息的相似特征信息；

所述存儲服務器查找所述相似特征信息所屬的相似特征文件，并將所述相似特征文件反饋給所述管理服務器。

可選的，所述存儲服務器將所述目標非結構化數據存儲至冷存儲區之后，還包括：

如果所述目標非結構化數據的優先級大于預設優先級，所述存儲服務器則在所述熱存儲區同時存儲所述非結構化數據。