[發(fā)明專利]數(shù)據(jù)處理方法及數(shù)據(jù)處理裝置

在審

• 申請?zhí)枺?/td>: 202110396355.7
• 申請日: 2021-04-13
• 公開（公告）號: CN113077159A
• 公開（公告）日: 2021-07-06
• 發(fā)明（設(shè)計(jì)）人: 馬軼;韓浩;任延平;趙俊
• 申請（專利權(quán)）人: 中能融合智慧科技有限公司
• 主分類號: G06Q10/06
• 分類號: G06Q10/06;G06Q10/04;G06K9/62;G06Q50/06
• 代理公司: 北京正和明知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11845
• 代理人: 馮志慧

1.一種數(shù)據(jù)處理方法，其特征在于，包括：

根據(jù)預(yù)設(shè)規(guī)則對采集的原始數(shù)據(jù)依次進(jìn)行清洗、提取；

根據(jù)提取的數(shù)據(jù)構(gòu)建關(guān)鍵指標(biāo)矩陣，其中，行代表不同用戶，列代表不同關(guān)鍵指標(biāo)；

采用預(yù)設(shè)算法對所述關(guān)鍵指標(biāo)矩陣進(jìn)行歸一化處理，并對歸一化后的矩陣進(jìn)行降維處理；

根據(jù)所述降維處理后的矩陣及預(yù)設(shè)算法獲得所述關(guān)鍵指標(biāo)的預(yù)測值。

2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述清洗包括刪除所述原始數(shù)據(jù)中的無效數(shù)據(jù)、重復(fù)數(shù)據(jù)和/或錯誤數(shù)據(jù)。

3.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述提取包括對清洗后的數(shù)據(jù)進(jìn)行歸類，所述歸類包括根據(jù)數(shù)據(jù)類別、數(shù)據(jù)來源和/或參數(shù)指標(biāo)對清洗后的數(shù)據(jù)進(jìn)行歸類。

4.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述歸一化處理包括以下步驟：

將所述關(guān)鍵指標(biāo)矩陣中各元素根據(jù)其所在列的最大值、最小值進(jìn)行歸一化到0-1之間。

5.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述降維處理包括以下步驟：

根據(jù)奇異值分解算法將所述歸一化后的矩陣分解為三個矩陣U、Σ、V^T；

根據(jù)奇異值平方和對矩陣U、Σ、V^T的維度進(jìn)行簡化，獲得簡化后的矩陣U、Σ、V^T；

對簡化后的矩陣U進(jìn)行復(fù)原，獲得復(fù)原后的矩陣U。

6.根據(jù)權(quán)利要求5所述的數(shù)據(jù)處理方法，其特征在于，所述根據(jù)所述降維處理后的矩陣及預(yù)設(shè)算法獲得所述關(guān)鍵指標(biāo)的預(yù)測值包括以下步驟：

將所述復(fù)原后的矩陣U中不同用戶的數(shù)據(jù)定義為不同向量；

根據(jù)余弦相似度公式計(jì)算獲得任意兩個向量的余弦相似度，并將獲得的余弦相似度進(jìn)行歸一化至0-1之間；

根據(jù)獲得的余弦相似度歸一化值獲得所述關(guān)鍵指標(biāo)的預(yù)測值。

7.根據(jù)權(quán)利要求6所述的數(shù)據(jù)處理方法，其特征在于，所述根據(jù)獲得的余弦相似度歸一化值獲得所述關(guān)鍵指標(biāo)的預(yù)測值包括以下步驟：

選取相對于某用戶的余弦相似度歸一化值最高的預(yù)設(shè)數(shù)量的其他用戶，并對所述其他用戶的關(guān)鍵指標(biāo)原始數(shù)據(jù)進(jìn)行存儲；

將選取的所述其他用戶的某關(guān)鍵指標(biāo)的原始數(shù)據(jù)加和平均，獲得所述某用戶的所述某關(guān)鍵指標(biāo)的預(yù)測值。

8.一種數(shù)據(jù)處理裝置，其特征在于，包括：

數(shù)據(jù)清洗單元，用于對采集的原始數(shù)據(jù)進(jìn)行清洗；

數(shù)據(jù)提取單元，用于對清洗后的數(shù)據(jù)進(jìn)行提取；

數(shù)據(jù)處理單元，用于根據(jù)提取的數(shù)據(jù)構(gòu)建關(guān)鍵指標(biāo)矩陣，采用預(yù)設(shè)算法對所述關(guān)鍵指標(biāo)矩陣進(jìn)行歸一化處理，并對歸一化后的矩陣進(jìn)行降維處理，以及根據(jù)所述降維處理后的矩陣及預(yù)設(shè)算法獲得關(guān)鍵指標(biāo)的預(yù)測值。

9.一種存儲介質(zhì)，其特征在于，所述存儲介質(zhì)包括存儲的程序，其中，所述程序運(yùn)行時(shí)執(zhí)行權(quán)利要求1至7任一項(xiàng)所述的數(shù)據(jù)處理方法。

10.一種電子裝置，包括存儲器、處理器及存儲在所述存儲器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，其特征在于，所述處理器通過所述計(jì)算機(jī)程序執(zhí)行權(quán)利要求1至7任一項(xiàng)所述的數(shù)據(jù)處理方法。