[發(fā)明專利]圖數(shù)據(jù)存儲(chǔ)、訪問、處理方法、訓(xùn)練方法、設(shè)備及介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202310188952.X
• 申請(qǐng)日: 2022-05-19
• 公開（公告）號(hào): CN116029891A
• 公開（公告）日: 2023-04-28
• 發(fā)明（設(shè)計(jì)）人: 王賢明;吳志華;吳鑫烜;馮丹蕾;姚雪峰;于佃海
• 申請(qǐng)（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號(hào): G06T1/60
• 分類號(hào): G06T1/60;G06N3/08
• 代理公司: 中科專利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 楊靜

本公開提供了一種圖數(shù)據(jù)存儲(chǔ)、訪問、處理方法、訓(xùn)練方法、設(shè)備及介質(zhì)，涉及人工智能技術(shù)領(lǐng)域，尤其涉及圖神經(jīng)網(wǎng)絡(luò)技術(shù)、計(jì)算機(jī)視覺和深度學(xué)習(xí)技術(shù)領(lǐng)域。具體實(shí)現(xiàn)方案為：響應(yīng)于接收到圖數(shù)據(jù)存儲(chǔ)請(qǐng)求，對(duì)待存儲(chǔ)圖數(shù)據(jù)進(jìn)行劃分，得到至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)；根據(jù)至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)，得到目標(biāo)圖切片數(shù)據(jù)和關(guān)聯(lián)圖切片數(shù)據(jù)；將目標(biāo)圖切片數(shù)據(jù)存儲(chǔ)至圖形處理器GPU；將關(guān)聯(lián)圖切片數(shù)據(jù)存儲(chǔ)至內(nèi)部存儲(chǔ)器；將至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)存儲(chǔ)至外部存儲(chǔ)器。

本申請(qǐng)是申請(qǐng)日為2022年5月19日，申請(qǐng)?zhí)枮?02210573156.3，發(fā)明名稱為“圖數(shù)據(jù)存儲(chǔ)、訪問、處理方法、訓(xùn)練方法、設(shè)備及介質(zhì)”的申請(qǐng)的分案申請(qǐng)。

技術(shù)領(lǐng)域

本公開涉及人工智能技術(shù)領(lǐng)域，尤其涉及圖神經(jīng)網(wǎng)絡(luò)技術(shù)、計(jì)算機(jī)視覺和深度學(xué)習(xí)技術(shù)領(lǐng)域。具體地，涉及一種圖數(shù)據(jù)存儲(chǔ)、訪問、處理方法、訓(xùn)練方法、設(shè)備及介質(zhì)。

背景技術(shù)

隨著計(jì)算機(jī)技術(shù)的不斷發(fā)展，圖數(shù)據(jù)也得到了發(fā)展。圖數(shù)據(jù)可以應(yīng)用圖形理論表征節(jié)點(diǎn)和邊信息。圖數(shù)據(jù)廣泛應(yīng)用于知識(shí)圖譜、金融反欺詐和社會(huì)關(guān)系挖掘等領(lǐng)域。

發(fā)明內(nèi)容

本公開提供了一種圖數(shù)據(jù)存儲(chǔ)、訪問、處理方法、訓(xùn)練方法、設(shè)備及介質(zhì)。

根據(jù)本公開的一方面，提供了一種圖數(shù)據(jù)存儲(chǔ)方法，包括：響應(yīng)于接收到圖數(shù)據(jù)存儲(chǔ)請(qǐng)求，對(duì)待存儲(chǔ)圖數(shù)據(jù)進(jìn)行劃分，得到至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)；根據(jù)上述至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)，得到目標(biāo)圖切片數(shù)據(jù)和關(guān)聯(lián)圖切片數(shù)據(jù)；將上述目標(biāo)圖切片數(shù)據(jù)存儲(chǔ)至圖形處理器GPU；將上述關(guān)聯(lián)圖切片數(shù)據(jù)存儲(chǔ)至內(nèi)部存儲(chǔ)器；以及，將上述至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)存儲(chǔ)至外部存儲(chǔ)器。

根據(jù)本公開的另一方面，提供了一種圖數(shù)據(jù)訪問方法，包括：響應(yīng)于接收到圖數(shù)據(jù)訪問請(qǐng)求，獲取待訪問標(biāo)識(shí)；以及，在確定目標(biāo)圖切片數(shù)據(jù)中存在與上述待訪問標(biāo)識(shí)相匹配的匹配標(biāo)識(shí)的情況下，根據(jù)上述匹配標(biāo)識(shí)，從上述目標(biāo)圖切片數(shù)據(jù)中獲取訪問結(jié)果，其中，上述目標(biāo)圖切片數(shù)據(jù)是根據(jù)本公開上述的方法中存儲(chǔ)于圖形處理器GPU中的待存儲(chǔ)圖數(shù)據(jù)。

根據(jù)本公開的另一方面，提供了一種圖數(shù)據(jù)訪問方法，包括：響應(yīng)于接收到來自圖形處理器GPU的待訪問標(biāo)識(shí)，在確定關(guān)聯(lián)圖切片數(shù)據(jù)中存在與上述待訪問標(biāo)識(shí)相匹配的匹配標(biāo)識(shí)的情況下，根據(jù)上述匹配標(biāo)識(shí)，從上述關(guān)聯(lián)圖切片數(shù)據(jù)中獲取訪問結(jié)果，其中，上述關(guān)聯(lián)圖切片數(shù)據(jù)是根據(jù)本公開上述的方法中存儲(chǔ)于上述內(nèi)部存儲(chǔ)器中的待存儲(chǔ)圖數(shù)據(jù)；以及，向上述GPU發(fā)送上述訪問結(jié)果。

根據(jù)本公開的另一方面，提供了一種圖神經(jīng)網(wǎng)絡(luò)模型的訓(xùn)練方法，包括：響應(yīng)于接收到模型訓(xùn)練請(qǐng)求，基于采樣策略，從目標(biāo)圖切片數(shù)據(jù)中確定至少一個(gè)目標(biāo)采樣節(jié)點(diǎn)，其中，上述目標(biāo)圖切片數(shù)據(jù)是根據(jù)本公開上述的方法中存儲(chǔ)于圖形處理器GPU中的待存儲(chǔ)數(shù)據(jù)；根據(jù)上述至少一個(gè)目標(biāo)采樣節(jié)點(diǎn)，從上述目標(biāo)圖切片數(shù)據(jù)、關(guān)聯(lián)圖切片數(shù)據(jù)和至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)之一中獲取與上述至少一個(gè)目標(biāo)采樣節(jié)點(diǎn)對(duì)應(yīng)的至少一階鄰居節(jié)點(diǎn)，其中，上述關(guān)聯(lián)圖切片數(shù)據(jù)是根據(jù)本公開上述的方法中存儲(chǔ)于內(nèi)部存儲(chǔ)器中的待存儲(chǔ)圖數(shù)據(jù)，上述至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)是根據(jù)本公開上述的方法中存儲(chǔ)于外部存儲(chǔ)器中的待存儲(chǔ)圖數(shù)據(jù)；根據(jù)上述至少一個(gè)目標(biāo)采樣節(jié)點(diǎn)的目標(biāo)采樣節(jié)點(diǎn)相關(guān)數(shù)據(jù)和上述至少一階鄰居節(jié)點(diǎn)的鄰居節(jié)點(diǎn)相關(guān)數(shù)據(jù)，得到至少一階子圖數(shù)據(jù)；以及，向深度學(xué)習(xí)平臺(tái)發(fā)送上述至少一階子圖數(shù)據(jù)，以便上述深度學(xué)習(xí)平臺(tái)利用上述至少一階子圖數(shù)據(jù)訓(xùn)練上述圖神經(jīng)網(wǎng)絡(luò)模型。

根據(jù)本公開的另一方面，提供了一種圖數(shù)據(jù)處理方法，包括：將目標(biāo)圖數(shù)據(jù)輸入圖神經(jīng)網(wǎng)絡(luò)模型，得到輸出結(jié)果，其中，上述圖神經(jīng)網(wǎng)絡(luò)模型是利用根據(jù)本公開上述的方法訓(xùn)練得到的。

根據(jù)本公開的另一方面，提供了一種圖數(shù)據(jù)存儲(chǔ)裝置，包括：第一獲得模塊，用于響應(yīng)于接收到圖數(shù)據(jù)存儲(chǔ)請(qǐng)求，對(duì)待存儲(chǔ)圖數(shù)據(jù)進(jìn)行劃分，得到至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)；第二獲得模塊，用于根據(jù)上述至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)，得到目標(biāo)圖切片數(shù)據(jù)和關(guān)聯(lián)圖切片數(shù)據(jù)；第一存儲(chǔ)模塊，用于將上述目標(biāo)圖切片數(shù)據(jù)存儲(chǔ)至圖形處理器GPU；第二存儲(chǔ)模塊，用于將上述關(guān)聯(lián)圖切片數(shù)據(jù)存儲(chǔ)至內(nèi)部存儲(chǔ)器；以及，第三存儲(chǔ)模塊，用于將上述至少兩個(gè)待存儲(chǔ)圖切片數(shù)據(jù)存儲(chǔ)至外部存儲(chǔ)器。