[發(fā)明專利]一種數(shù)據(jù)處理方法、裝置及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201910943914.4
• 申請(qǐng)日: 2019-09-30
• 公開(kāi)（公告）號(hào): CN110708375A
• 公開(kāi)（公告）日: 2020-01-17
• 發(fā)明（設(shè)計(jì)）人: 蔡猛
• 申請(qǐng)（專利權(quán)）人: 恩億科(北京)數(shù)據(jù)科技有限公司
• 主分類號(hào): H04L29/08
• 分類號(hào): H04L29/08
• 代理公司: 11262 北京安信方達(dá)知識(shí)產(chǎn)權(quán)代理有限公司
• 代理人: 王康;栗若木

本文公開(kāi)了一種數(shù)據(jù)處理方法、裝置及系統(tǒng)，應(yīng)用于由來(lái)自多個(gè)云平臺(tái)中的節(jié)點(diǎn)主機(jī)組成的數(shù)據(jù)處理系統(tǒng)中，包括：主節(jié)點(diǎn)主機(jī)通過(guò)預(yù)先設(shè)置的數(shù)據(jù)訪問(wèn)接口獲取來(lái)自數(shù)據(jù)處理系統(tǒng)外部請(qǐng)求方的待處理數(shù)據(jù)的所屬目標(biāo)文件的標(biāo)識(shí)以及數(shù)據(jù)處理內(nèi)容；根據(jù)預(yù)先存儲(chǔ)的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)與從節(jié)點(diǎn)主機(jī)中所存儲(chǔ)文件的標(biāo)識(shí)的對(duì)應(yīng)關(guān)系中獲取與目標(biāo)文件的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)；向與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)發(fā)送待處理數(shù)據(jù)的數(shù)據(jù)處理內(nèi)容；獲取來(lái)自從節(jié)點(diǎn)主機(jī)根據(jù)數(shù)據(jù)處理內(nèi)容獲得的數(shù)據(jù)處理結(jié)果，并將數(shù)據(jù)處理結(jié)果通過(guò)數(shù)據(jù)訪問(wèn)接口返回給請(qǐng)求方。本申請(qǐng)由于實(shí)現(xiàn)了針對(duì)多個(gè)平云臺(tái)中數(shù)據(jù)的處理，因此實(shí)現(xiàn)了云平臺(tái)之間的真正對(duì)接。

技術(shù)領(lǐng)域

本發(fā)明實(shí)施例涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤指一種數(shù)據(jù)處理方法、裝置及系統(tǒng)。

背景技術(shù)

近年來(lái)，隨著云計(jì)算概念的不斷普及以及云計(jì)算技術(shù)的不斷發(fā)展，越來(lái)越多的企業(yè)開(kāi)始嘗試云計(jì)算技術(shù)，然而如何真正落地云計(jì)算技術(shù)，云平臺(tái)的對(duì)接是需要考慮的重要方面。

相關(guān)技術(shù)中，云平臺(tái)的對(duì)接主要體現(xiàn)在管理層面的對(duì)接。

然而，管理層面的對(duì)接只是云平臺(tái)表面層次的對(duì)接，無(wú)法實(shí)現(xiàn)平云臺(tái)之間的真正對(duì)接。

發(fā)明內(nèi)容

本申請(qǐng)?zhí)峁┝艘环N數(shù)據(jù)處理方法、裝置及系統(tǒng)，能夠?qū)崿F(xiàn)云平臺(tái)之間的真正對(duì)接。

本申請(qǐng)?zhí)峁┝艘环N數(shù)據(jù)處理方法，應(yīng)用于由來(lái)自多個(gè)云平臺(tái)中的節(jié)點(diǎn)主機(jī)組成的數(shù)據(jù)處理系統(tǒng)中，包括：

主節(jié)點(diǎn)主機(jī)通過(guò)預(yù)先設(shè)置的數(shù)據(jù)訪問(wèn)接口獲取來(lái)自所述數(shù)據(jù)處理系統(tǒng)外部請(qǐng)求方的待處理數(shù)據(jù)的所屬目標(biāo)文件的標(biāo)識(shí)以及數(shù)據(jù)處理內(nèi)容；

所述主節(jié)點(diǎn)主機(jī)根據(jù)預(yù)先存儲(chǔ)的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)與從節(jié)點(diǎn)主機(jī)中所存儲(chǔ)文件的標(biāo)識(shí)的對(duì)應(yīng)關(guān)系中獲取與所述目標(biāo)文件的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)；

所述主節(jié)點(diǎn)主機(jī)向與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)發(fā)送所述待處理數(shù)據(jù)的數(shù)據(jù)處理內(nèi)容；

所述主節(jié)點(diǎn)主機(jī)獲取來(lái)自所述從節(jié)點(diǎn)主機(jī)根據(jù)所述數(shù)據(jù)處理內(nèi)容獲得的數(shù)據(jù)處理結(jié)果，并將所述數(shù)據(jù)處理結(jié)果通過(guò)所述數(shù)據(jù)訪問(wèn)接口返回給所述請(qǐng)求方。

所述數(shù)據(jù)處理包括：數(shù)據(jù)讀取、數(shù)據(jù)寫(xiě)入和數(shù)據(jù)計(jì)算；

當(dāng)所述數(shù)據(jù)處理為數(shù)據(jù)計(jì)算，所述主節(jié)點(diǎn)主機(jī)根據(jù)預(yù)先存儲(chǔ)的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)與從節(jié)點(diǎn)主機(jī)中所存儲(chǔ)文件的標(biāo)識(shí)的對(duì)應(yīng)關(guān)系中獲取與目標(biāo)文件的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)之后，且所述主節(jié)點(diǎn)主機(jī)向與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)發(fā)送待處理數(shù)據(jù)的數(shù)據(jù)處理內(nèi)容之前，還包括：

所述主節(jié)點(diǎn)主機(jī)獲取與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)的計(jì)算資源容量；

所述主節(jié)點(diǎn)主機(jī)向與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)發(fā)送待處理數(shù)據(jù)的數(shù)據(jù)處理內(nèi)容，包括：

當(dāng)與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)的計(jì)算資源容量大于預(yù)設(shè)閾值時(shí)，所述主節(jié)點(diǎn)主機(jī)向與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)發(fā)送所述待處理數(shù)據(jù)的數(shù)據(jù)處理內(nèi)容。

當(dāng)所述與獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)的計(jì)算資源容量小于所述預(yù)設(shè)閾值時(shí)，還包括：

所述主節(jié)點(diǎn)主機(jī)獲取所述待處理數(shù)據(jù)所屬節(jié)點(diǎn)主機(jī)所在的目標(biāo)地理位置；

所述主節(jié)點(diǎn)主機(jī)獲取計(jì)算資源容量大于所述預(yù)設(shè)閾值且所在地理位置與所述目標(biāo)地理位置最近的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)；

所述主節(jié)點(diǎn)主機(jī)向與重新獲得的從節(jié)點(diǎn)主機(jī)的標(biāo)識(shí)對(duì)應(yīng)的從節(jié)點(diǎn)主機(jī)發(fā)送所述待處理數(shù)據(jù)的數(shù)據(jù)處理內(nèi)容。