[發明專利]一種初次入城車輛數據管理方法及系統

在審

• 申請號: 201711243542.1
• 申請日: 2017-11-30
• 公開（公告）號: CN108021652A
• 公開（公告）日: 2018-05-11
• 發明（設計）人: 杜志豪;賀珊;高云;嚴其松;楊光
• 申請（專利權）人: 武漢烽火眾智數字技術有限責任公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京匯澤知識產權代理有限公司 11228
• 代理人: 張濤

本發明公開了一種初次入城車輛數據管理方法，包括：采集過車數據到基于大數據的數據倉庫；統計該定時周期內出現過的車輛信息；統計向前分析時間范圍內出現過的車輛相關信息；若某車在定時周期內出現，在向前分析時間范圍內沒有出現，則判斷該車為初次入城并將其信息寫入數據倉庫；當查詢初次入城的車輛時，直接調用數據倉庫進行查詢。由于過車數據已經提前分析，并將初次入城的數據直接寫入到數據倉庫，因此在需要查詢時是對分析結果的查詢，而不是對原始數據的查詢，查詢效率高。本管理方法還能提高數據查詢的實時性、有效性等。本發明還公開了一種初次入城車輛數據管理系統。

技術領域

本發明屬于數據分析技術領域，具體涉及一種初次入城車輛數據管理方法及系統。

背景技術

車輛大數據分析是當前研究的熱點，一般包括初次入城分析、套牌車分析、高危地區車輛查詢等相關內容，這些研究有利于管理部門了解車輛相關情況，能為可能出現的犯罪行為提供數據支持。然而隨著車輛的大量使用以及人類工作、生活半徑的增加，采集的車輛相關數據變得越來越多且越來越頻繁，如何在大量數據中高效、準確提取對管理部門有用的信息成為當務之急。

以初次入城分析為例，現有技術一般包括兩種，一種是單獨建立一個初次入城車輛數據庫，此庫中對每輛機動車有且僅有一條記錄，大大降低了數據的保有量，解決了傳統過車信息數據量巨大，無法實時定位初次入城車輛以及歷史查詢慢的問題,而且由于不同時間范圍內的初次入城結果往往是不同的，而本方法無法提供一定時間范圍內的初次入城查詢分析，則查詢結果不準確。另一種方法是在一個系統中保存有所有數據，根據一定的查詢時間范圍統計所有車輛的出城次數，對于出進城次數為1的車輛信息，還要再向前分析一段時間，如前一段時間有該車的記錄則說明為非首次入城，否則為首次入城。但這種方法效率不高，每一次查詢都要對所有數據進行統計。

另外，現有的技術一般都無法支持大數據量下的存儲，從而無法支持大數據量的業務。在實際應用中，城市車輛數據增量過多帶來的服務性能橫向擴展。無法支持大數據量下的實時查詢分析，分析速度較慢。

發明內容

針對現有技術中存在的缺陷，本發明的目的是提供一種初次入城車輛數據管理方法及系統，能夠應用于大數據業務場合，提高初次入城車輛查詢的效率及一定范圍內的分析真實性、有效性及實時性。

為達到以上目的，本發明采用的技術方案是：

一種初次入城車輛數據管理方法，包括以下步驟：

采集過車數據到基于大數據的數據倉庫；

設置定時周期，當達到定時周期時，統計該定時周期內出現過的車輛信息；

以定時周期的起始時間為基礎點，設置向前分析時間范圍，統計該時間范圍內出現過的車輛相關信息；

若某車在定時周期內出現，在向前分析時間范圍內沒有出現，則判斷該車為初次入城，并將其信息寫入數據倉庫；

當查詢初次入城的車輛時，直接調用數據倉庫進行查詢。

進一步的，采集過車數據到所述數據倉庫的方法包括：將原始過車數據通過ETL工具入庫到所述數據倉庫。

進一步的，所述數據倉庫包括：Impala、Hive。

進一步的，若判斷某車為初次入城且有多條信息時，僅保留入城時間最早的對應信息，并將其寫入數據倉庫。

進一步的，在所述數據倉庫中建立至少兩個數據庫，用于分別存儲原始過車數據及初次入城車輛數據；或者，在所述數據倉庫中的一個數據庫中建立至少兩張表，用于分別存儲原始過車數據及初次入城車輛數據。

相應的，本發明還公開了一種初次入城車輛數據管理系統，包括：

數據采集模塊，用于采集過車數據到基于大數據的數據倉庫；