[發明專利]一種流式處理物聯網數據的方法在審
| 申請號： | 201711352758.1 | 申請日： | 2017-12-15 |
| 公開（公告）號： | CN108108423A | 公開（公告）日： | 2018-06-01 |
| 發明（設計）人： | 吳少東;閔早華;張祿宇 | 申請（專利權）人： | 吉旗（成都）科技有限公司 |
| 主分類號： | G06F17/30 | 分類號： | G06F17/30 |
| 代理公司： | 北京權智天下知識產權代理事務所(普通合伙) 11638 | 代理人： | 劉玉欣 |
| 地址： | 610000 四川省*** | 國省代碼： | 四川;51 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 物聯網數據 流式處理 拼湊 經緯度 第三方服務 查詢數據 查詢效率 機構數據 實時接收 使用數據 數據入庫 數據問題 瞬時壓力 原始數據 容錯性 臟數據 流轉 調用 隊列 運算 過濾 耗時 占用 查詢 市區 | ||
【權利要求書】：
1.一種流式處理物聯網數據的方法,包括原始數據收集，臟數據過濾，機構數據補全，省市區信息補全，經緯度運算，其特征在于：包括以下步驟：
A、由匯通天下GSP上傳原始報文，報文經解析之后，生成原始數據存儲并發送到流隊列中；
B、通過定義的任務獲取流隊列中的數據，并進行調用第三方服務，用以補全該條數據的機構信息，處理完畢后，流經下一個任務；
C、依次經過數據收集，臟數據處理，機構數據補全，省市區信息補全，經緯度運算等五個任務；
D、最后，數據將流入特定存儲任務，存儲于非關系型數據庫以供查詢。
2.根據權利要求1所述的一種流式處理物聯網數據的方法，其特征在于：所述步驟C中臟數據處理方法包括以下步驟：
A、根據樣例數據和樣例數據的格式，定義數據格式，采集第一數據；
B、根據數據格式將采集的第一數據進行過濾和清洗，剔除臟數據，得到第二數據，并存儲第二數據；
C、提取第二數據并按照業務邏輯進行數據處理；將第二數據進行數據轉換；讀取轉換后的第二數據。
下載完整專利技術內容需要扣除積分，VIP會員可以免費下載。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于吉旗（成都）科技有限公司，未經吉旗（成都）科技有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201711352758.1/1.html，轉載請聲明來源鉆瓜專利網。
