[發(fā)明專利]一種數(shù)據(jù)裝載方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201911149047.3
• 申請(qǐng)日: 2019-11-21
• 公開（公告）號(hào): CN110990377B
• 公開（公告）日: 2023-08-22
• 發(fā)明（設(shè)計(jì)）人: 葉杰敏;郭琰;韓朱忠
• 申請(qǐng)（專利權(quán)）人: 上海達(dá)夢(mèng)數(shù)據(jù)庫有限公司
• 主分類號(hào): G06F16/21
• 分類號(hào): G06F16/21;G06F16/22;G06F16/2455
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發(fā)明公開了一種數(shù)據(jù)裝載方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)。該方法包括：接收至少一個(gè)客戶端的待裝載數(shù)據(jù)并將所述待裝載數(shù)據(jù)發(fā)送至目標(biāo)裝載表的頁緩存結(jié)點(diǎn)；通過所述目標(biāo)裝載表對(duì)應(yīng)的頁插入線程將所述頁緩存結(jié)點(diǎn)中的待裝載數(shù)據(jù)裝載至預(yù)設(shè)數(shù)據(jù)結(jié)構(gòu)。上述技術(shù)方案通過將至少一個(gè)客戶端的數(shù)據(jù)緩存至頁緩存結(jié)點(diǎn)，由對(duì)應(yīng)的頁插入線程裝載頁緩存結(jié)點(diǎn)中的待裝載數(shù)據(jù)，實(shí)現(xiàn)對(duì)一個(gè)或多個(gè)客戶端的數(shù)據(jù)進(jìn)行裝載，并且以頁為單位進(jìn)行裝載，提高數(shù)據(jù)裝載效率。

技術(shù)領(lǐng)域

本發(fā)明實(shí)施例涉及數(shù)據(jù)處理領(lǐng)域，尤其涉及一種數(shù)據(jù)裝載方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)。

背景技術(shù)

當(dāng)數(shù)據(jù)庫業(yè)務(wù)發(fā)生變更或者更換數(shù)據(jù)庫系統(tǒng)時(shí)，往往需要將大量的數(shù)據(jù)遷移至更新后的數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)中，例如，B+樹是數(shù)據(jù)庫中一種常用的數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)。向B+樹裝載數(shù)據(jù)的過程需要針對(duì)每一條記錄，先定位到B+樹的數(shù)據(jù)頁，再插入記錄，記錄的插入操作會(huì)影響到后續(xù)記錄的定位操作，即，上一個(gè)記錄插入完畢后才能進(jìn)行下一個(gè)記錄的定位。這種對(duì)每一條記錄依次進(jìn)行定位和插入的串行裝載方式，不適用于大量的數(shù)據(jù)、多個(gè)裝載實(shí)例、多個(gè)客戶端的情況，數(shù)據(jù)裝載效率低下。

發(fā)明內(nèi)容

本發(fā)明提供了一種數(shù)據(jù)裝載方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)，以提高數(shù)據(jù)裝載的效率。

第一方面，本發(fā)明實(shí)施例提供了一種數(shù)據(jù)裝載方法，包括：

接收至少一個(gè)客戶端的待裝載數(shù)據(jù)并將所述待裝載數(shù)據(jù)發(fā)送至目標(biāo)裝載表的頁緩存結(jié)點(diǎn)；

通過所述目標(biāo)裝載表對(duì)應(yīng)的頁插入線程將所述頁緩存結(jié)點(diǎn)中的待裝載數(shù)據(jù)裝載至預(yù)設(shè)數(shù)據(jù)結(jié)構(gòu)。

進(jìn)一步的，在所述接收至少一個(gè)客戶端的待裝載數(shù)據(jù)之前，還包括：

接收到首個(gè)客戶端的數(shù)據(jù)裝載請(qǐng)求，則初始化數(shù)據(jù)裝載環(huán)境。

進(jìn)一步的，所述初始化數(shù)據(jù)裝載環(huán)境包括：

確定目標(biāo)裝載表并創(chuàng)建所述目標(biāo)裝載表對(duì)應(yīng)的頁插入線程；

為所述目標(biāo)裝載表分配一批頁緩存結(jié)點(diǎn)；

針對(duì)所述目標(biāo)裝載表生成虛會(huì)話，所述虛會(huì)話用于處理所述至少一個(gè)客戶端的數(shù)據(jù)裝載請(qǐng)求；

為所述目標(biāo)裝載表上全局鎖；

將所述目標(biāo)裝載表的客戶端引用計(jì)數(shù)置為1。

進(jìn)一步的，還包括：

每接收到一個(gè)客戶端的數(shù)據(jù)裝載請(qǐng)求，所述客戶端引用計(jì)數(shù)加1；

每裝載完一個(gè)客戶端的待裝載數(shù)據(jù)，所述客戶端引用計(jì)數(shù)減1。

進(jìn)一步的，還包括：

若所述客戶端引用計(jì)數(shù)為0，則釋放所述目標(biāo)裝載表的全局鎖。

進(jìn)一步的，所述通過所述頁插入線程將所述頁緩存結(jié)點(diǎn)中的待裝載數(shù)據(jù)裝載至預(yù)設(shè)數(shù)據(jù)結(jié)構(gòu)，包括：

通過所述頁插入線程提取頁緩存結(jié)點(diǎn)作為待插入頁，并生成所述待插入頁對(duì)應(yīng)的鍵值；

若所述預(yù)設(shè)數(shù)據(jù)結(jié)構(gòu)葉子層的最右端為非根頁，則將所述待插入頁作為所述非根頁的右兄弟，并為所述非根頁添加第一虛記錄，所述第一虛記錄指向所述待插入頁。

進(jìn)一步的，所述通過所述頁插入線程將所述頁緩存結(jié)點(diǎn)中的待裝載數(shù)據(jù)裝載至預(yù)設(shè)數(shù)據(jù)結(jié)構(gòu)，包括：

若所述預(yù)設(shè)數(shù)據(jù)結(jié)構(gòu)的葉子層的最右端為根頁，則將所述根頁中的數(shù)據(jù)轉(zhuǎn)移至新頁，并為所述根頁添加第二虛記錄，所述第二虛記錄指向所述新頁；

將所述待插入頁作為所述新頁的右兄弟，為所述新頁添加第三虛記錄，所述第三虛記錄指向所述待插入頁。

第二方面，本發(fā)明實(shí)施例提供了一種數(shù)據(jù)裝載裝置，包括：