[發(fā)明專利]基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202011411910.0
• 申請日: 2020-12-03
• 公開（公告）號: CN112667702A
• 公開（公告）日: 2021-04-16
• 發(fā)明（設計）人: 周俊臨;張青松;茍庭勇;胡俠;何方顯;蘭宇
• 申請（專利權）人: 成都大數(shù)據(jù)產業(yè)技術研究院有限公司;成都數(shù)之聯(lián)科技有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/26
• 代理公司: 北京鼎德寶專利代理事務所(特殊普通合伙) 11823
• 代理人: 牟炳彥

1.一種基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)，其特征在于：包括平臺前端模塊、平臺后端模塊及核心挖掘服務端模塊；

所述平臺前端模塊為基于Backbone框架的單頁面應用，所述平臺前端模塊的Model通過發(fā)送GET請求給所述臺后端模塊獲取所需內容，然后該內容通過模板渲染到所述平臺前端模塊；

所述平臺后端模塊使用Ruby on Rails作為開發(fā)框架，在此基礎上開發(fā)具體業(yè)務邏輯，所述前端模塊通過RESTful風格的API和具體的路由表和所述平臺后端模塊交互，所述平臺后端模塊和計算后端的MinerServer交互，持久化數(shù)據(jù)庫使用PostgreSQL；

所述核心挖掘服務端模塊基于Netty對外提供RPC服務，并提供算子、工作流、模型訪問服務。

2.根據(jù)權利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)，其特征在于：所述平臺前端模塊以Models-View-Presenter模式進行開發(fā)，整個頁面由handlebars Template前端模板渲染生成；

用戶通過對URL路由的操作或者頁面中DOM節(jié)點的操作使頁面跳轉并重新渲染新的頁面。

3.根據(jù)權利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)，其特征在于：若用戶改變了Model，所述前端模塊通過發(fā)送PUT\POST請求給所述后端模塊來保存數(shù)據(jù)。

4.根據(jù)權利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)，其特征在于：前端工作流程圖基于Draw2D框架開發(fā)，以滿足用戶拖拽算子組成工作流的需求。

5.根據(jù)權利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)，其特征在于：所述核心挖掘服務端模塊封裝了一層Connector，實現(xiàn)對Hadoop相關組件的調用。

6.根據(jù)權利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)，其特征在于：RPC服務端在線的情況下，通過RPC客戶端API獲取各類服務對象，進而調用各類Service提供的相關接口。

7.根據(jù)權利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)挖掘系統(tǒng)，其特征在于：RPC服務不直接操作Hadoop相關組件，RPC服務內部通過ConnectorService來獲取底層基礎框架的數(shù)據(jù)或計算資源。