[發(fā)明專利]一種將數(shù)據(jù)寫入內(nèi)存的方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201610109642.4
• 申請(qǐng)日: 2016-02-26
• 公開（公告）號(hào): CN107132993B
• 公開（公告）日: 2021-02-02
• 發(fā)明（設(shè)計(jì)）人: 郭建山
• 申請(qǐng)（專利權(quán)）人: 阿里巴巴（中國）有限公司
• 主分類號(hào): G06F3/06
• 分類號(hào): G06F3/06;G06F16/25
• 代理公司: 北京同達(dá)信恒知識(shí)產(chǎn)權(quán)代理有限公司 11291
• 代理人: 黃志華

本發(fā)明提供一種將數(shù)據(jù)寫入內(nèi)存的方法及裝置，該方法包括：獲取存儲(chǔ)有定長數(shù)據(jù)和不定長數(shù)據(jù)的寫入文件；其中，寫入文件中的每條定長數(shù)據(jù)包括一條源數(shù)據(jù)的定長數(shù)據(jù)以及該條源數(shù)據(jù)的不定長數(shù)據(jù)的索引信息，寫入文件中的每條不定長數(shù)據(jù)包括一條源數(shù)據(jù)的不定長數(shù)據(jù)；寫入文件中的所有不定長數(shù)據(jù)連續(xù)存儲(chǔ)以及所有定長數(shù)據(jù)連續(xù)存儲(chǔ)；按照字節(jié)對(duì)齊的方式，從所述寫入文件中讀取所有定長數(shù)據(jù)，并將讀取的定長數(shù)據(jù)寫入內(nèi)存；根據(jù)寫入文件中定長數(shù)據(jù)包含的索引信息，從所述寫入文件中讀取與所述索引信息對(duì)應(yīng)的不定長數(shù)據(jù)，并將讀取的不定長數(shù)據(jù)寫入內(nèi)存。本發(fā)明減少了數(shù)據(jù)讀取和寫入操作的次數(shù)，耗時(shí)較短、效率較高。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，尤其涉及一種將數(shù)據(jù)寫入內(nèi)存的方法及裝置。

背景技術(shù)

目前在很多的應(yīng)用場景下，如地圖數(shù)據(jù)庫、學(xué)生信息庫、病患信息庫等，在這些信息庫中包括多條源數(shù)據(jù)，每條源數(shù)據(jù)包含的數(shù)據(jù)項(xiàng)數(shù)量相同，有些數(shù)據(jù)項(xiàng)對(duì)應(yīng)的字符串長度在所有的源數(shù)據(jù)中是固定的(則這種數(shù)據(jù)項(xiàng)稱為定長數(shù)據(jù))，有些數(shù)據(jù)項(xiàng)對(duì)應(yīng)的字符串長度在不同源數(shù)據(jù)中為可變的。每一條源數(shù)據(jù)包括多項(xiàng)信息(則這種數(shù)據(jù)項(xiàng)稱為不定長數(shù)據(jù))。以學(xué)生信息庫為例：每一條源數(shù)據(jù)為一個(gè)學(xué)生的信息，一條源數(shù)據(jù)包括以下數(shù)據(jù)項(xiàng)：名字、學(xué)號(hào)、院系、班級(jí)、家庭住址、各科成績；則在該源數(shù)據(jù)中學(xué)號(hào)、各科成績均是數(shù)值其對(duì)應(yīng)的數(shù)值的長度為固定的如一個(gè)字節(jié)，而班級(jí)、名字、院系、家庭住址這些數(shù)據(jù)項(xiàng)對(duì)于不同的學(xué)生是不同的，如有些學(xué)生的名字為2個(gè)漢字，有些學(xué)生的名字為3個(gè)，甚至還有些學(xué)生的名字為4個(gè)漢字，因此同樣是名字這個(gè)數(shù)據(jù)項(xiàng)，但是在不同的源數(shù)據(jù)中其占的字節(jié)數(shù)是不同的，因此前述班級(jí)、名字、院系、家庭住址這些數(shù)據(jù)項(xiàng)為不定長數(shù)據(jù)。

現(xiàn)有技術(shù)中，在將源數(shù)據(jù)文件中的源數(shù)據(jù)加載到內(nèi)存中，首先需要將源數(shù)據(jù)文件中的數(shù)據(jù)存儲(chǔ)至寫入文件中，再從寫入文件中讀取源數(shù)據(jù)寫入至內(nèi)存中。目前源數(shù)據(jù)文件的源數(shù)據(jù)存儲(chǔ)格式與寫入文件中的源數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)一致。

目前將源數(shù)據(jù)文件中的源數(shù)據(jù)存儲(chǔ)至寫入文件中的過程為：每讀取一條源數(shù)據(jù)則將該條源數(shù)據(jù)存儲(chǔ)至寫入文件中，在寫入文件中存儲(chǔ)該條源數(shù)據(jù)在寫入文件中的偏移、源數(shù)據(jù)的總長度、源數(shù)據(jù)中不定長數(shù)據(jù)的長度、不定長數(shù)據(jù)以及源數(shù)據(jù)中的定長數(shù)據(jù)。

如下表1為源數(shù)據(jù)文件中源數(shù)據(jù)的存儲(chǔ)格式：

表1