[發明專利]一種半結構化數據庫實現大數據管理的方法

在審

• 申請號: 202210049568.7
• 申請日: 2022-01-17
• 公開（公告）號: CN114510604A
• 公開（公告）日: 2022-05-17
• 發明（設計）人: 孫星;周慧萍;范曄
• 申請（專利權）人: 上汽大通汽車有限公司
• 主分類號: G06F16/81
• 分類號: G06F16/81;G06F16/27;G06F16/23;G06Q30/00
• 代理公司: 南京蘇科專利代理有限責任公司 32102
• 代理人: 姚姣陽

一種半結構化數據庫實現大數據管理的方法，通過定時器同步GBOM系統的EBOM數據到SBOM。同步ECM的特征，特征族以及VTC等信息到SBOM；通過定時器生產EBOM的產品用法；在產品用法中標記是否需要售后維修；然后通過定時器將需要維修的產品用法生成售后用法；用戶創建配圖，并維護配圖。維護配圖的時候選擇的是售后用法。創建EPC發布任務時選擇需要發布的產品車型年，然后根據規則發布數據到EPC系統。采用MongoDB文檔存儲模式，避免通過批量車VC計算單輛車上BOM不準確的問題，因此直接采用單車VIN BOM模式存儲，在SBOM發布數據到EPC中以空間換時間，支持海量數據的存儲和精準查詢。

技術領域

本發明屬于汽修管理技術領域，具體涉及一種半結構化數據庫實現大數據管理的方法。

背景技術

當前SBOM基于主流的spring boot技術進行自研自開發，同時滿足以下幾個優點：基于spring、依賴管理、統一監控、分布式系統、統一的配置管理、快速部署和統一開發；

現在網絡上的很多NoSQL開源數據庫完全屬于社區型的，沒有官方支持，給使用者帶來了很大的風險。而開源的文檔數據庫MongoDB背后有商業公司為它提供商業培訓和支持，所以當前使用是最優的。

SBOM為售后數據管理系統，為EPC電子配件目錄提供數據源。SBOM中包含上汽大通歷年來所有下線車輛VIN信息以及車輛裝車件BOM信息，此信息存儲在結構化數據庫Oracle中，在SBOM對此全量數據進行存儲或計算時需要占用大量的數據庫資源，且需要將此存儲數據發送到EPC的結構化數據庫Mysql中。

當這些海量數據不能歸檔且需要全量計算使用的時候，需要對此大數據進行分析，考慮業務使用場景，能否將結構化的數據轉成文檔模式，從而減少結構化數據庫存儲空間的浪費以及系統計算對結構化數據庫性能的影響。在此我們考慮了MongoDB。

MongoDB是一個介于關系數據庫和非關系數據庫之間的產品，是非關系數據庫當中功能最豐富，最像關系數據庫的，是一個基于分布式文件存儲的數據庫。面向集合存儲，易存儲對象類型的數據。在MongoDB中，文檔是對數據的抽象，它被使用在Client端和Server端的交互中。所有的Client端(各種語言的Driver)都會使用這種抽象，它的表現形式就是BSON(Binary JSON )。BSON是一個輕量級的二進制數據格式。MongoDB能夠使用BSON，并將BSON作為數據的存儲存放在磁盤中。當Client端寫入文檔，使用查詢等操作時，需要將文檔編碼轉為BSON格式，然后再發送給Server端。同樣，Server端的返回結果也是編碼為BSON格式再放回給Client端的。

發明內容

本發明所要解決的技術問題是克服現有技術的不足，提供一種半結構化數據庫實現大數據管理的方法，采用MongoDB文檔存儲模式，避免批量車通過VC計算車輛上BOM不準確的問題，直接采用單車VIN BOM模式存儲，在SBOM發布數據到EPC中以空間換時間，支持海量數據的存儲和精準查詢。

本發明提供一種半結構化數據庫實現大數據管理的方法，包括SBOM數據流和發布EPC；

SBOM數據流：

通過定時器同步GBOM系統的EBOM數據到SBOM；同步ECM的特征、特征族以及VTC信息到SBOM；

通過定時器生產EBOM的產品用法；

在產品用法中標記是否需要售后維修；再通過定時器將需要維修的產品用法生成售后用法；

用戶創建配圖，并維護配圖；選擇售后用法維護配圖；

創建EPC發布任務發布數據到EPC；創建發布任務時選擇需要發布的產品車型年；

發布EPC：

初始化SBOM_vds表focus_feature和focus_country，并根據車型編號和項目編號更新SBOM_vds表focus_feature；

將合并件、零件用法及一級件零件用法初始化；