[發明專利]一種物聯網MME日志數據的處理方法及裝置有效

申請號：	202011194469.5	申請日：	2020-10-31
公開（公告）號：	CN112328567B	公開（公告）日：	2022-10-04
發明（設計）人：	郭蓉	申請（專利權）人：	中盈優創資訊科技有限公司
主分類號：	G06F16/18	分類號：	G06F16/18;G16Y40/10
代理公司：	上海嘉藍專利代理事務所(普通合伙) 31407	代理人：	盧化宇
地址：	201800 上海市嘉定區安***	國省代碼：	上海;31
權利要求書：	查看更多	說明書：	查看更多
摘要：
搜索關鍵詞：	一種聯網 mme 日志數據處理方法裝置
鉆瓜網技術展會專利詞庫專利權人專利榜在售專利公布日期熱門專利

【說明書】：

本發明的實施例提供了一種物聯網MME日志數據的處理方法及裝置。所述方法包括采集原始MME日志文件，進行分類存儲，得到對應的分類存儲路徑；生成配置文件，讀取原始MME日志文件，對其進行等分切割；根據每個分文件中的分類存儲路徑識別出配置文件中對應的配置信息；獲取每個分文件中的目標字段及目標字段對應的處理模板，對目標字段進行處理，得到處理后的MME日志文件，并根據用戶類型進行分類存儲。本發明快速高效、靈活可配地處理各個廠商設備上報的種類不一的日志文件，對原始MME日志進行批量處理，實現各類用戶信息的分類存儲以及規范入庫，節約服務器資源，實現物聯網用戶的MME信令數據存儲分析。

技術領域

本發明的實施例一般涉及數據處理領域，并且更具體地，涉及一種物聯網MME日志數據的處理方法及裝置。

背景技術

隨著4G技術的日益成熟，4G用戶也迎來爆發式增長。用戶使用終端上網過程中會通過MME設備進行接入，然后MME會將相關用戶信息上報給HSS以及SGW、PGW等網元，實現用戶和不同網元的連接。這中間MME與用戶以及其它網元的每一次交互都會產生日志信息，加上龐大的4G用戶群，造成MME日志數據量巨大，各省最高數據量可達100G，共幾十億條數據。目前在用的處理方法存在性能瓶頸，需要多臺服務器才能滿足要求，成本較高且不利于維護。

MME設備是4G核心網元，任何廠商建立的LTE網絡都必須要有該邏輯網元，因此造成設備多元化，且同一設備的日志文件也有多種類型，格式、字段內容不盡相同，這也導致了MME日志的復雜多樣性。目前為了兼容多個廠商的日志格式，針對每個廠商定制了一種處理方式，冗雜繁瑣，一旦文件格式或字段發生變化，需要修改程序，工作量大且容易出現問題，靈活性低。而且無論是EPC的用戶還是物聯網或者是NB的用戶，接入LTE網絡都是同一套MME設備，MME日志里面也沒有區分不同的用戶。因此，如果想單獨針對物聯網用戶或者NB用戶進行相關數據的統計分析或者是用戶狀態的感知，必須在日志解析過程中實現特定用戶信息的分類存儲。

發明內容

根據本發明的實施例，提供了一種物聯網MME日志數據的處理方案。

在本發明的第一方面，提供了一種物聯網MME日志數據的處理方法。該方法包括：

采集原始MME日志文件，進行分類存儲，得到對應的分類存儲路徑；

生成配置文件，所述配置文件用于按照原始MME日志文件的類別存儲所述原始MME日志文件的配置信息；

讀取原始MME日志文件，對其進行等分切割，得到若干個分文件；

根據每個分文件中的分類存儲路徑識別出所述配置文件中對應的配置信息；

根據所述配置信息獲取所述每個分文件中的目標字段及目標字段對應的處理模板，對所述目標字段進行處理，得到處理后的MME日志文件，并根據用戶類型進行分類存儲。

進一步地，所述分類存儲路徑為將原始MME日志文件對應存儲在按照廠商、省份和文件類型進行分級的三級存儲目錄中，生成的存儲路徑。

進一步地，所述配置文件包括原始MME日志文件的存儲目錄、日志文件需要提取的字段、對字段的相應處理方法和各類用戶日志的存儲目錄。

進一步地，所述根據用戶類型進行分類存儲，包括：

識別用戶字段，根據所述用戶字段的字段值在數據表中映射出用戶類型，根據用戶類型進行存儲。