[發明專利]一種用于數據庫的表的批量讀取方法、裝置和系統

有效

• 申請號: 201310174909.4
• 申請日: 2013-05-13
• 公開（公告）號: CN104156358B
• 公開（公告）日: 2018-09-18
• 發明（設計）人: 鄒維
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 趙囡囡

本發明公開了一種用于數據庫的表的批量讀取方法、裝置和系統，所述方法包括如下步驟：接收對數據庫的表的批量讀取請求，其中，所述表包括多條數據記錄，所述批量讀取請求包括：待讀取的總數據記錄的條數、讀取所述總數據記錄所需的總讀取次數、以及待讀取的起始數據記錄的主鍵值；根據所述批量讀取請求，生成所述數據庫的查詢語句，其中，所生成的查詢語句的數目等于總讀取次數，并且在每條查詢語句中利用待讀取的總數據記錄的各個主鍵值對總讀取次數的取模運算來選擇該條查詢語句將讀取的數據記錄；利用所生成的查詢語句，對所述數據庫的所述表進行讀取操作。通過本發明，可以減少對數據庫系統中的海量數據進行讀取所耗費的時間。

技術領域

本發明涉及計算機技術領域，尤其涉及一種用于數據庫的表的批量讀取方法、裝置和系統。

背景技術

數據庫（Database）是按照數據結構來組織、存儲和管理數據的倉庫，它產生于距今五十年前，隨著信息技術和市場的發展，特別是二十世紀九十年代以后，對數據庫的數據的管理方式不再僅僅是存儲和管理數據，而是轉變成符合多種多樣的數據庫應用的需要的綜合數據管理方式。數據庫有很多種類型，簡單類型的數據庫例如是存儲有各種數據的表格，復雜類型的數據庫例如是能夠進行海量數據存儲的大型數據庫系統。當前，上述大型數據庫系統的應用是數據庫系統的開發、研究領域的熱點。

在針對大型數據庫系統開發軟件應用時，經常需要把大型數據庫中的海量數據讀取到內存中。由于所述海量數據的數目過大，考慮到網絡帶寬和內存容量的限制，結果導致很難一次性把所有數據都讀出來。通常，現有技術的解決方法是先對數據庫的主鍵進行排序，隨后根據所述主鍵對所需的海量數據進行批量讀取，也就是說每次讀取海量數據中的一部分，通過多次讀取來逐步讀取全部所需的數據。然而，這種現有技術的解決方法存在著數據讀取所消耗的時間較長的問題。

發明內容

有鑒于此，本發明提供一種改進的用于數據庫的表的批量讀取方法、裝置和系統，來解決以上背景技術部分提到的技術問題。

一種用于數據庫的表的批量讀取方法，所述方法包括如下步驟：

接收對數據庫的表的批量讀取請求，其中，所述表包括多條數據記錄，所述批量讀取請求包括：待讀取的總數據記錄的條數、讀取所述總數據記錄所需的總讀取次數、以及待讀取的起始數據記錄的主鍵值；

根據所述批量讀取請求，生成所述數據庫的查詢語句，其中，所生成的查詢語句的數目等于總讀取次數，并且在每條查詢語句中利用待讀取的總數據記錄的各個主鍵值對總讀取次數的取模運算來選擇該條查詢語句將讀取的數據記錄；

利用所生成的查詢語句，對所述數據庫的所述表進行讀取操作。

對應地，本發明還提出了一種用于數據庫的表的批量讀取裝置，所述裝置包括：

接收模塊，用于接收對數據庫的表的批量讀取請求，其中，所述表包括多條數據記錄，所述批量讀取請求包括：待讀取的總數據記錄的條數、讀取所述總數據記錄所需的總讀取次數、以及待讀取的起始數據記錄的主鍵值；

查詢語句生成模塊，用于根據所述批量讀取請求，生成所述數據庫的查詢語句，其中，所生成的查詢語句的數目等于總讀取次數，并且在每條查詢語句中利用待讀取的總數據記錄的各個主鍵值對總讀取次數的取模運算來選擇該條查詢語句將讀取的數據記錄；

讀取模塊，用于利用所生成的查詢語句，對所述數據庫的所述表進行讀取操作。

對應地，本發明還提出了一種用于數據庫的表的批量讀取系統，包括服務器和通過網絡與所述服務器相連接的客戶端，所述服務器包括：

接收模塊，用于從所述客戶端接收對數據庫的表的批量讀取請求，其中，所述表包括多條數據記錄，所述批量讀取請求包括：待讀取的總數據記錄的條數、讀取所述總數據記錄所需的總讀取次數、以及待讀取的起始數據記錄的主鍵值；