[發(fā)明專利]基于云服務(wù)器和數(shù)據(jù)交互的數(shù)據(jù)處理方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202010924648.3
• 申請日: 2020-03-27
• 公開（公告）號: CN112148216A
• 公開（公告）日: 2020-12-29
• 發(fā)明（設(shè)計）人: 尹兵
• 申請（專利權(quán)）人: 尹兵
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 暫無信息
• 代理人: 暫無信息

本申請是關(guān)于基于云服務(wù)器和數(shù)據(jù)交互的數(shù)據(jù)處理方法及系統(tǒng)。應(yīng)用本申請方案，無需每次將待存儲數(shù)據(jù)進(jìn)行直接存儲，通過將待存儲數(shù)據(jù)對應(yīng)的當(dāng)前設(shè)備標(biāo)識與目標(biāo)數(shù)據(jù)進(jìn)行存儲，能夠通過目標(biāo)數(shù)據(jù)與設(shè)備標(biāo)識的一對多關(guān)系提高存儲效率，避免大量的重復(fù)數(shù)據(jù)占用云服務(wù)器的存儲空間從而影響云服務(wù)器的計算效率。此外，通過對初始化緩存的設(shè)定時長進(jìn)行延長，能夠確保對數(shù)據(jù)存儲區(qū)中的原始數(shù)據(jù)的完整遍歷，避免漏掉部分原始數(shù)據(jù)的遍歷。

技術(shù)領(lǐng)域

本申請涉及數(shù)據(jù)存儲技術(shù)領(lǐng)域，尤其涉及基于云服務(wù)器和數(shù)據(jù)交互的數(shù)據(jù)處理方法及系統(tǒng)。

背景技術(shù)

云計算（cloudcomputing）技術(shù)又稱為網(wǎng)格計算技術(shù)，是能夠在極短的時間內(nèi)實(shí)現(xiàn)海量數(shù)據(jù)處理的技術(shù)。隨著云計算技術(shù)的發(fā)展，現(xiàn)代社會能夠?qū)崿F(xiàn)準(zhǔn)確、安全且可靠的數(shù)據(jù)交互和通信。云服務(wù)器作為海量數(shù)據(jù)存儲的樞紐，在云計算中扮演著不可替代的作用。然而，隨著數(shù)據(jù)量的不斷增多以及數(shù)據(jù)規(guī)模的不斷擴(kuò)大，云服務(wù)器往往會存儲大量的重復(fù)數(shù)據(jù)，這會占用云服務(wù)器的存儲空間并影響云服務(wù)器的計算效率。

發(fā)明內(nèi)容

本申請?zhí)峁┗谠品?wù)器和數(shù)據(jù)交互的數(shù)據(jù)處理方法及系統(tǒng)，以改善現(xiàn)有技術(shù)存在的上述技術(shù)問題。

本發(fā)明提供了一種基于云服務(wù)器和數(shù)據(jù)交互的數(shù)據(jù)處理方法，應(yīng)用于云服務(wù)器，所述方法包括：

在接收到終端設(shè)備發(fā)送的數(shù)據(jù)存儲請求時，響應(yīng)所述數(shù)據(jù)存儲請求并將所述終端設(shè)備對應(yīng)的待存儲數(shù)據(jù)存入預(yù)設(shè)的緩存；其中，所述緩存用于對臨時數(shù)據(jù)進(jìn)行存儲，所述云服務(wù)器周期性地對所述緩存進(jìn)行初始化以清除所述緩存內(nèi)所存儲的數(shù)據(jù)，所述云服務(wù)器的數(shù)據(jù)存儲區(qū)中存儲有至少多個原始數(shù)據(jù)；

對至少多個原始數(shù)據(jù)進(jìn)行遍歷，確定至少多個原始數(shù)據(jù)中是否存在與所述緩存中的待存儲數(shù)據(jù)相一致的目標(biāo)數(shù)據(jù)；其中，每個原始數(shù)據(jù)關(guān)聯(lián)存儲有對應(yīng)的至少一個設(shè)備標(biāo)識，所述設(shè)備標(biāo)識用于確定將每個原始數(shù)據(jù)存入所述數(shù)據(jù)存儲區(qū)的原始終端設(shè)備；

在確定出至少多個原始數(shù)據(jù)中存在與所述緩存中的待存儲數(shù)據(jù)相一致的目標(biāo)數(shù)據(jù)時，獲取所述目標(biāo)數(shù)據(jù)對應(yīng)的至少一個設(shè)備標(biāo)識；確定所述終端設(shè)備的當(dāng)前設(shè)備標(biāo)識；遍歷所述至少一個設(shè)備標(biāo)識，確定至少一個設(shè)備標(biāo)識中是否存在與當(dāng)前設(shè)備標(biāo)識相同的目標(biāo)設(shè)備標(biāo)識；在確定出至少一個設(shè)備標(biāo)識中存在與當(dāng)前設(shè)備標(biāo)識相同的所述目標(biāo)設(shè)備標(biāo)識時，將所述目標(biāo)設(shè)備標(biāo)識對應(yīng)的第一特征值進(jìn)行更新；在確定出至少一個設(shè)備標(biāo)識中不存在與當(dāng)前設(shè)備標(biāo)識相同的所述目標(biāo)設(shè)備標(biāo)識時，將當(dāng)前設(shè)備標(biāo)識與所述目標(biāo)數(shù)據(jù)進(jìn)行關(guān)聯(lián)存儲并刪除所述緩存中的待存儲數(shù)據(jù)，為當(dāng)前設(shè)備標(biāo)識設(shè)置第二特征值；

在對至少多個原始數(shù)據(jù)進(jìn)行遍歷的過程中，判斷從將所述待存儲數(shù)據(jù)存入所述緩存的時刻開始的累計時長是否達(dá)到設(shè)定時長；若是，根據(jù)至少多個原始數(shù)據(jù)中未遍歷的原始數(shù)據(jù)的占比將所述設(shè)定時長進(jìn)行延長，直至完成對至少多個原始數(shù)據(jù)的遍歷；其中，所述設(shè)定時長是所述云服務(wù)器初始化所述緩存的周期時長，每經(jīng)過一次所述設(shè)定時長，所述云服務(wù)器對所述緩存進(jìn)行一次初始化以清除所述緩存內(nèi)存儲的數(shù)據(jù)；

其中，所述方法還包括：

采集終端設(shè)備的用戶行為數(shù)據(jù)，并對用戶行為數(shù)據(jù)的進(jìn)行特征提取得到用戶行為特征，然后將用戶行為特征進(jìn)行存儲。

優(yōu)選地，所述將所述終端設(shè)備對應(yīng)的待存儲數(shù)據(jù)存入預(yù)設(shè)緩存的步驟，具體包括：

提取所述待存儲數(shù)據(jù)的數(shù)據(jù)特征向量以及各數(shù)據(jù)段；其中，不同的數(shù)據(jù)段對應(yīng)不同的數(shù)據(jù)信息；

在依據(jù)所述數(shù)據(jù)特征向量確定出所述待存儲數(shù)據(jù)中包含有數(shù)據(jù)結(jié)構(gòu)類別的情況下，基于所述待存儲數(shù)據(jù)在所述數(shù)據(jù)結(jié)構(gòu)類別中的數(shù)據(jù)段及其數(shù)據(jù)段權(quán)重確定所述待存儲數(shù)據(jù)在數(shù)據(jù)信息類別中的各數(shù)據(jù)段與所述待存儲數(shù)據(jù)在所述數(shù)據(jù)結(jié)構(gòu)類別中的各數(shù)據(jù)段之間的數(shù)據(jù)差異系數(shù)；

將所述待存儲數(shù)據(jù)在所述數(shù)據(jù)信息類別中的與所述所述待存儲數(shù)據(jù)在所述數(shù)據(jù)結(jié)構(gòu)類別中的數(shù)據(jù)段之間的數(shù)據(jù)差異系數(shù)最小的數(shù)據(jù)段調(diào)整到所述待存儲數(shù)據(jù)的所述數(shù)據(jù)結(jié)構(gòu)類別中；