[發明專利]基于塊數據的數據存儲方法及裝置

在審

• 申請號: 201710896624.X
• 申請日: 2017-09-28
• 公開（公告）號: CN107506155A
• 公開（公告）日: 2017-12-22
• 發明（設計）人: 黎仁全;唐明輝;李邱林;賈西貝
• 申請（專利權）人: 深圳市華傲數據技術有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京酷愛智慧知識產權代理有限公司11514
• 代理人: 安娜

技術領域

本發明涉及數據處理技術領域，具體涉及一種基于塊數據的數據存儲方法及裝置。

背景技術

隨著信息技術與經濟社會的交匯融合，雖然各政府部門中存儲著海量的政務數據，但是各部門間的數據都互不共享，沒有進行統一的管理。在現有技術中，并沒有成熟的技術能夠對海量零碎的政務數據資源進行整合與處理，各政務部門間的數據存在壁壘，數據共享性差，無法實現對某一地區所有數據的統籌、管理與分析，為政府決策提供數據支撐或市民服務。

如何有效地利用不同類別且彼此獨立的數據，獲取同一地區所有屬性的數據，是本領域技術人員亟需解決的問題。

發明內容

針對現有技術中的缺陷，本發明提供基于塊數據的數據存儲方法及裝置，能夠有效地利用不同類別且彼此獨立的數據，獲取同一地區所有屬性的數據。

第一方面，本發明提供一種基于塊數據的數據存儲方法，該方法包括：

對每條數據的地址信息進行標準化處理，形成標準地址；

根據每條數據，建立每條數據所涉及的實體間的關聯關系，并將每條數據的實體關聯至該條數據的標準地址；

存儲不同等級的行政區域所覆蓋的標準地址關聯的數據。

進一步地，對每條數據的地址信息進行標準化處理，形成標準地址，具體包括：

對貼源層中每條數據的地址信息進行標準化處理，形成標準地址，并將每條數據更新至原子層；

根據每條數據，建立每條數據所涉及的實體間的關聯關系，并將每條數據的實體關聯至該條數據的標準地址，具體包括：

根據原子層中每條數據，建立每條數據所涉及的實體間的關聯關系，并將每條數據的實體關聯至該條數據的標準地址；

將原子層中關聯之后的數據更新至整合層；

存儲不同等級的行政區域所覆蓋的標準地址關聯的數據，具體包括：

按照不同等級的行政區域所覆蓋的每個標準地址，存儲該標準地址所關聯的數據至整合層。

進一步地，對貼源層中每條數據的地址信息進行標準化處理之前，該方法還包括：

對緩沖層中的每條數據添加時間標識；

根據時間標識，將緩沖層中的數據同步至貼源層。

進一步地，將緩沖層中的數據同步至貼源層之后，該方法還包括：

根據時間標識，更新緩沖層中的數據。

基于上述任意基于塊數據的數據存儲方法實施例，進一步地，存儲不同等級的行政區域所覆蓋的標準地址關聯的數據，具體包括：

根據用戶的權限等級，設置對應的目標行政區域；

存儲目標行政區域所覆蓋的標準地址關聯的數據。

進一步地，對貼源層中每條數據的地址信息進行標準化處理，形成標準地址，具體包括：

按照標準地址庫對貼源層中每條數據的地址信息進行標準化處理，形成標準地址。

第二方面，本發明提供一種基于塊數據的數據存儲裝置，該裝置包括地址標準化模塊、關聯模塊和數據塊劃分模塊，地址標準化模塊用于對每條數據的地址信息進行標準化處理，形成標準地址；關聯模塊用于根據每條數據，建立每條數據所涉及的實體間的關聯關系，并將每條數據的實體關聯至該條數據的標準地址；數據塊劃分模塊用于存儲不同等級的行政區域所覆蓋的標準地址關聯的數據。

進一步地，地址標準化模塊具體用于：對貼源層中每條數據的地址信息進行標準化處理，形成標準地址，并將每條數據更新至原子層；

關聯模塊具體用于：根據原子層中每條數據，建立每條數據所涉及的實體間的關聯關系，并將每條數據的實體關聯至該條數據的標準地址；將原子層中關聯之后的數據更新至整合層；

數據塊劃分模塊具體用于：按照不同等級的行政區域所覆蓋的每個標準地址，存儲該標準地址所關聯的數據至整合層。

進一步地，本實施例基于塊數據的數據存儲裝置還包括數據緩沖模塊：數據緩沖模塊用于對緩沖層中的每條數據添加時間標識；根據時間標識，將緩沖層中的數據同步至貼源層。

進一步地，數據緩沖模塊還用于：根據時間標識，更新緩沖層中的數據。

由上述技術方案可知，本實施例提供的基于塊數據的數據存儲方法及裝置，通過對每條數據的地址信息進行標準化處理，作為數據塊有效切分的前提。同時，該方法還能夠將不同數據的實體、標準地址進行關聯，保證數據塊切分時，能夠涉及到不同屬性的數據。并且，按照行政區域進行數據劃分與存儲，便于用戶查看不同等級的行政區域的所有數據。