[發明專利]一種數據檢索方法及裝置

無效

• 申請號: 201310088648.4
• 申請日: 2013-03-19
• 公開（公告）號: CN104063384A
• 公開（公告）日: 2014-09-24
• 發明（設計）人: 錢志財
• 申請（專利權）人: 上海軟智信息科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 王寶筠

技術領域

本申請涉及軟件技術領域，特別涉及一種數據檢索方法及裝置。

背景技術

隨著互聯網和云計算的迅速發展，越來越多的用戶通過網絡來搜索各種各樣的數據并獲取數據資源，因此對搜索引擎的數據檢索性能要求越來越高。

為提高數據檢索速率，通常采用內存數據庫存儲數據，并在內存數據庫中進行數據檢索。這種方案中，由于數據存于內存，相比磁盤的I/O性能明顯較高，但內存中存儲的數據無法持久化，在內存服務器斷電之后數據會丟失，無法實現數據永久存儲。

發明內容

本申請所要解決的技術問題是提供一種數據檢索方法及裝置，用以解決現有技術中無法保證數據安全存儲的前提下快速檢索數據的技術問題。

本申請提供了一種數據檢索方法，其特征在于，應用于存儲服務器，所述存儲服務器中存儲有至少一條目標數據及其數據關鍵值，所述方法包括：

預先提取所述存儲服務器中目標數據的數據關鍵值，將所述數據關鍵值存儲于至少一個內存服務器中；

接收數據檢索請求，所述數據檢索請求包括檢索標識；

分別在每個所述內存服務器中查詢與所述檢索標識相對應的目標數據關鍵值；

若查詢到所述目標數據關鍵值，在所述存儲服務器中獲取與所述目標數據關鍵值相對應的目標數據。

上述方法，優選的，所述將所述數據關鍵值存儲于至少一個內存服務器中，包括：

將所述數據關鍵值進行劃分，得到至少一個數據塊，每個所述數據塊包括至少一條數據關鍵值；

將每個所述數據塊分別存儲于一個內存服務器中。

上述方法，優選的，在所述存儲服務器中獲取與所述目標數據關鍵值相對應的目標數據之后，所述方法還包括：

將所述獲取的目標數據存儲至預設的緩存區域中；

其中，在所述接收數據檢索請求之后，在所述分別在所述內存服務器中查詢與所述檢索標識相對應的目標數據關鍵值之前，所述方法還包括：

在所述緩存區域中查詢是否含有與當前數據檢索請求中的檢索標識相對應的目標數據，如果是，獲取所述緩存區域中查詢到的目標數據，結束當前數據檢索，否則，執行所述分別在所述內存服務器中查詢與所述檢索標識相對應的目標數據關鍵值。

上述方法，優選的，所述將每個所述數據塊分別存儲于一個內存服務器中，包括：

將每個所述數據塊按照預設的壓縮存儲規則分別存儲于一個內存服務器中；

其中，所述壓縮存儲規則包括字典壓縮規則、前綴壓縮規則和差值壓縮規則。

上述方法，優選的，所述分別在每個所述內存服務器中查詢與所述檢索標識相對應的目標數據關鍵值，包括：

依據倒排索引的檢索規則分別在每個所述內存服務器中查詢與所述檢索標識相對應的目標數據關鍵值。

本申請還提供了一種數據檢索裝置，應用于存儲服務器，所述存儲服務器中存儲有至少一條目標數據及其數據關鍵值，所述裝置包括：

數據預處理單元，用于預先提取所述存儲服務器中目標數據的數據關鍵值，將所述數據關鍵值存儲于至少一個內存服務器中；

請求接收單元，用于接收數據檢索請求，所述數據檢索請求包括檢索標識；

數據檢索單元，用于分別在每個所述內存服務器中查詢與所述檢索標識相對應的目標數據關鍵值；

數據提取單元，用于在查詢到所述目標數據關鍵值時，在所述存儲服務器中獲取與所述目標數據關鍵值相對應的目標數據。

上述裝置，優選的，所述數據預處理單元包括：

關鍵值提取子單元，用于預先提取所述存儲服務器中目標數據的數據關鍵值；

關鍵值存儲子單元，用于將所述關鍵值提取子單元提取的數據關鍵值進行劃分，得到至少一個數據塊，將每個所述數據塊分別存儲于一個內存服務器中，每個所述數據塊包括至少一條數據關鍵值。

上述裝置，優選的，所述裝置還包括：

數據緩存單元，用于將所述數據提取單元獲取到的目標數據存儲至預設的緩存區域中；

其中，所述裝置還包括：

數據預檢索單元，用于在所述請求接收單元接收到數據檢索請求之后，在所述緩存區域中查詢是否含有與當前數據檢索請求中的檢索標識相對應的目標數據，如果是，獲取所述緩存區域中查詢到的目標數據，結束當前數據檢索，否則，觸發所述數據檢索單元。

上述裝置，優選的，所述關鍵值存儲子單元包括：

關鍵值劃分模塊，用于將所述數據關鍵值進行劃分，得到至少一個數據塊，每個所述數據塊包括至少一條數據關鍵值；