[發(fā)明專利]一種基于大數(shù)據(jù)的云平臺(tái)架構(gòu)及其數(shù)據(jù)處理方法

有效

• 申請(qǐng)?zhí)枺?/td>: 202110647604.5
• 申請(qǐng)日: 2021-06-10
• 公開（公告）號(hào): CN113377577B
• 公開（公告）日: 2022-06-07
• 發(fā)明（設(shè)計(jì)）人: 王超鋒;周凱;王偉;趙銘璐;王飛;趙志
• 申請(qǐng)（專利權(quán)）人: 上海西信信息科技股份有限公司
• 主分類號(hào): G06F11/14
• 分類號(hào): G06F11/14;G06F16/27
• 代理公司: 上海塔科專利代理事務(wù)所(普通合伙) 31380
• 代理人: 耿恩華

1.一種基于大數(shù)據(jù)的云平臺(tái)架構(gòu)的數(shù)據(jù)處理方法，其特征在于，云平臺(tái)架構(gòu)自下而上依次包括邊緣層、大數(shù)據(jù)處理分析層、大數(shù)據(jù)應(yīng)用層，所述邊緣層自下而上依次包括數(shù)據(jù)采集傳感器子層和邊緣數(shù)據(jù)處理子層；所述大數(shù)據(jù)處理分析層自下而上依次包括數(shù)據(jù)接口子層、數(shù)據(jù)存儲(chǔ)子層、數(shù)據(jù)處理分析子層和數(shù)據(jù)驗(yàn)證子層；

所述的數(shù)據(jù)處理方法包括如下步驟:

S1、傳感器節(jié)點(diǎn)采集數(shù)據(jù)，對(duì)采集數(shù)據(jù)進(jìn)行本地備份，記作第一備份數(shù)據(jù)，同時(shí)傳感器節(jié)點(diǎn)的數(shù)據(jù)處理器定時(shí)對(duì)采集數(shù)據(jù)進(jìn)行處理，得到第一處理結(jié)果；

S2、傳感器節(jié)點(diǎn)的數(shù)據(jù)處理器按照循環(huán)索引鏈表，將該傳感器節(jié)點(diǎn)采集的數(shù)據(jù)備份到所述循環(huán)索引鏈表中相鄰的傳感器節(jié)點(diǎn)，記作第二備份數(shù)據(jù)；

S3、數(shù)據(jù)處理器將該傳感器節(jié)點(diǎn)采集的數(shù)據(jù)傳輸?shù)剿鰯?shù)據(jù)接口子層，所述數(shù)據(jù)處理分析子層將接收到的采集數(shù)據(jù)備份到所述數(shù)據(jù)存儲(chǔ)子層，記作第三備份數(shù)據(jù)，并且所述數(shù)據(jù)處理分析子層對(duì)數(shù)據(jù)進(jìn)行處理，得到第二處理結(jié)果；

S4、所述數(shù)據(jù)驗(yàn)證子層對(duì)比第一處理結(jié)果和第二處理結(jié)果，如果不一致，則采用第一處理結(jié)果作為最終的處理結(jié)果，并對(duì)數(shù)據(jù)傳輸環(huán)境或傳輸設(shè)備進(jìn)行檢修；

S5、所述數(shù)據(jù)驗(yàn)證子層對(duì)比第一備份數(shù)據(jù)、第二備份數(shù)據(jù)和第三備份數(shù)據(jù)，如果三者一致，則采用任一項(xiàng)作為備份數(shù)據(jù)，如果三者中兩者數(shù)據(jù)相同，另一者不同，則采用相同的兩個(gè)作為備份數(shù)據(jù)，如果三者都不相同，則選取數(shù)據(jù)偏差最小的兩個(gè)數(shù)據(jù)的平均值作為備份數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)采集傳感器子層由生產(chǎn)過程中用到的各種傳感器組成，所述邊緣數(shù)據(jù)處理子層由各傳感器對(duì)應(yīng)的數(shù)據(jù)處理器組成，所述邊緣層中的傳感器和對(duì)應(yīng)的數(shù)據(jù)處理器組成傳感器節(jié)點(diǎn)。

3.根據(jù)權(quán)利要求2所述的數(shù)據(jù)處理方法，其特征在于，所述邊緣數(shù)據(jù)處理子層定時(shí)對(duì)傳感器采集到的數(shù)據(jù)進(jìn)行處理，得到第一處理結(jié)果；所述數(shù)據(jù)處理分析子層對(duì)傳感器采集到的數(shù)據(jù)進(jìn)行處理，得到第二處理結(jié)果；所述數(shù)據(jù)驗(yàn)證子層對(duì)同一時(shí)刻的第一處理結(jié)果和第二處理結(jié)果進(jìn)行比較，如果二者不一致，則采用第一處理結(jié)果作為最終的處理結(jié)果，并對(duì)數(shù)據(jù)傳輸環(huán)境或傳輸設(shè)備進(jìn)行檢修。

4.根據(jù)權(quán)利要求3所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)處理器對(duì)傳感器節(jié)點(diǎn)采集的數(shù)據(jù)進(jìn)行本地備份；在各所述傳感器節(jié)點(diǎn)之間建立各所述傳感器節(jié)點(diǎn)之間的循環(huán)索引鏈表，將各所述傳感器采集的數(shù)據(jù)按照所述循環(huán)索引鏈表，循環(huán)備份到所述循環(huán)索引鏈表中相鄰的傳感器節(jié)點(diǎn)，以實(shí)現(xiàn)各傳感器之間的循環(huán)備份。