[發明專利]一種基于智能制造過程的多源異構數據存儲方法

有效

• 申請號: 201810320428.2
• 申請日: 2018-04-11
• 公開（公告）號: CN110377598B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 王忠民;樊武東;賀炎;宋國豪;陳彥萍
• 申請（專利權）人: 西安郵電大學
• 主分類號: G06F16/22
• 分類號: G06F16/22
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于智能制造過程的多源異構數據存儲方法，其特征在于，包括以下步驟：

(1)多源異構數據采集；

(2)引入傳感器缺失數據填補算法確保完整的存儲數據，該算法采用改進的混沌遺傳優化方法估計不完整數據的均值和協方差對應的最佳參數，再根據已知數據利用改進MCMC方法估計缺失數據，解決調控數據中的缺失問題；

(3)選擇可以有效存儲多源異構數據的數據庫；

(4)根據創建的樹形映射方法進行多源異構數據存儲映射，將樹形結構中的葉子節點設為數據存儲節點，用樹形結構中的父節點來進行父子節點之間關系的映射描述；

(5)根據提出的大文件直接存儲，小文件通過緩沖隊列與大文件進行合并方法進行多源異構數據的存儲，其只進行相同屬性數據的合并，進一步包括：規定大文件大小大于存儲塊大小的一半，小文件定義為小于塊大小的一半，優先小文件緩沖隊列中最大文件進行合并；具體方式為：進行文件存儲時，先通過文件大小判斷語句，判斷當前要存儲的文件是否為大文件；如果是大文件則直接選擇新的空塊進行存儲；如果是小文件，首先將小文件和已存儲的大文件塊大小進行相加判斷；若此小文件和已有大文件塊空間相加后超過塊大小，則此小文件暫時存放在緩沖隊列中；為了避免緩沖隊列過長增加存儲時間，緩沖隊列設定為10個文件；當小文件再次到來時，先進行小文件與已有大文件塊占據空間總和進行計算；若合并后空間沒有超過塊大小則合并，若超過則將小文件加入緩沖隊列；再用緩沖隊列中的小文件進行存儲判斷；找到當前適合合并的小文件就進行合并。

2.根據權利要求1所述的一種基于智能制造過程的多源異構數據存儲方法，其特征在于，所述的多源異構數據采集模塊，其多源異構數據主要包括傳感器數據，其中的異構數據包括溫濕度壓力傳感器數據、RFID識讀器數據、圖片、音頻視頻，其在傳感器數據采集前要求在數據采集前確保傳感器供電和數據傳輸良好。

3.根據權利要求1所述的一種基于智能制造過程的多源異構數據存儲方法，其特征在于，所述的引入傳感器缺失數據填補算法，包括：提前對每個傳感器需錄取測試數據集，進一步包括：根據不同的傳感器，測試分析算法的參數值。

4.根據權利要求1所述的一種基于智能制造過程的多源異構數據存儲方法，其特征在于，所述的提出多源異構數據有效存儲的方法，選取MongoDB數據庫進行存儲，針對音頻、視頻采用MongoDB內置中的GridFS文件系統進行存儲；片鍵選用使用哈希片鍵。