[發明專利]針對資產數據的數據處理系統

有效

• 申請號: 201410775769.0
• 申請日: 2014-12-15
• 公開（公告）號: CN104391992B
• 公開（公告）日: 2018-10-09
• 發明（設計）人: 張晴晴;季永鋒;邢召林
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 溫旭;郝傳鑫

1.一種針對資產數據的數據處理系統，其特征在于，所述數據處理系統包括邏輯層、緩存層和數據存儲層，其中，

所述數據存儲層用于以分別存儲的方式存儲配置項、配置項之間的關系以及配置項的屬性；

所述緩存層用于以緩存的形式存儲所述數據存儲層中的數據；

所述邏輯層包括查詢優化模塊，用于根據查詢條件查詢所述緩存層，并根據查詢結果確定從緩存層中查詢目標數據還是從所述數據存儲層中查詢目標數據；

其中，所述配置項包括資產分類和資產實例；

其中，所述數據存儲層包括：

用于存儲屬性信息的第一存儲區，

用于存儲資產分類信息的第二存儲區，

用于存儲資產分類與屬性的對應關系的第三存儲區，

用于存儲資產分類之間的關系的第四存儲區，

用于存儲資產實例信息的第五存儲區，

用于存儲資產實例的屬性值的第六存儲區，

用于存儲資產實例之間的關系的第七存儲區，

在所述第六存儲區中，以橫表的形式存儲所述資產實例的第一屬性值，以縱表的形式存儲所述資產實例的第二屬性值。

2.如權利要求1所述的系統，其特征在于，所述配置項包括資產分類和資產實例，所述資產實例的第一屬性值存儲在第一表中，所述資產實例的第二屬性值存儲在表結構不同于所述第一表的第二表中。

3.如權利要求1或2所述的系統，其特征在于，

所述配置項包括資產分類和資產實例；

在所述緩存層中，以第一數據結構緩存資產分類信息、屬性信息以及資產分類與屬性的對應關系，以第二數據結構緩存所有資產實例的屬性值，以第三數據結構緩存資產分類之間的關系、資產實例之間的關系、熱點屬性信息和索引信息。

4.如權利要求1或2所述的系統，其特征在于，所述緩存層還用于，采用MemcacheQ對所述數據存儲層進行數據庫操作。

5.如權利要求3所述的系統，其特征在于，所述查詢優化模塊具體用于：

根據查詢條件中的屬性查詢所述緩存層中的索引信息以確定查詢條件中的屬性是否為熱點屬性；

如果不是熱點屬性，則從所述數據存儲層中查詢目標信息；

如果是熱點屬性，則從所述緩存層中查詢目標信息。

6.如權利要求5所述的系統，其特征在于，所述查詢優化模塊具體用于：

在根據關系型查詢條件從所述緩存層中查詢目標信息時，根據關聯資產實例的量進行判斷，如果關聯資產實例的量超過閾值，則從所述數據存儲層中查詢目標信息；如果未超過閾值，則從所述緩存層中查詢目標信息。

7.如權利要求1或2所述的系統，其特征在于，

所述邏輯層還包括事務支持模塊，所述事務支持模塊用于識別事務類請求；

所述緩存層還通過REDIS的multi/exec實現所述緩存層的事務特性。

8.如權利要求1或2所述的系統，其特征在于，所述系統還包括：

數據抓取層，用于抓取線上資產數據；

一致性校驗和同步模塊，用于根據抓取的資產數據對所述數據存儲層中的數據和所述緩存層中的數據進行一致性校驗，以及用于將抓取到的資產數據中同步到所述數據存儲層和所述緩存層中。

9.如權利要求1或2所述的系統，其特征在于，所述系統還包括對外接口，用于接收用戶的操作請求以對所述數據存儲層中的數據進行查詢或維護。