[發(fā)明專利]分布式數(shù)據(jù)挖掘方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201710241931.4
• 申請日: 2017-04-14
• 公開（公告）號: CN107025288A
• 公開（公告）日: 2017-08-08
• 發(fā)明（設(shè)計）人: 李存昌
• 申請（專利權(quán)）人: 四川九鼎瑞信軟件開發(fā)有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;H04L29/08
• 代理公司: 北京超凡志成知識產(chǎn)權(quán)代理事務(wù)所(普通合伙)11371
• 代理人: 梁斌

1.一種分布式數(shù)據(jù)挖掘方法，其特征在于，所述方法應(yīng)用于分布式數(shù)據(jù)挖掘系統(tǒng)，所述分布式數(shù)據(jù)挖掘系統(tǒng)包括：第一服務(wù)器及分布式集群組，所述分布式集群組包括多個用于進行模型運算及挖掘分析的第二服務(wù)器，所述方法包括：

第一服務(wù)器獲取用戶在瀏覽器界面選擇的挖掘數(shù)據(jù)信息；

第一服務(wù)器基于所述挖掘數(shù)據(jù)信息進行變量定義，以便進行模型運算；

第一服務(wù)器獲取用戶在瀏覽器界面選擇的模型信息，并將挖掘數(shù)據(jù)信息及選擇的所述模型信息發(fā)送給分布式集群組；

分布式集群組接收所述第一服務(wù)器發(fā)送的所述挖掘數(shù)據(jù)信息及選擇的模型信息，根據(jù)用戶選擇的模型進行模型運算及挖掘分析。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述第一服務(wù)器獲取用戶在瀏覽器界面選擇的挖掘數(shù)據(jù)信息的步驟包括：

獲取用戶在瀏覽器界面選擇的需要進行挖掘分析的交換服務(wù)信息及數(shù)據(jù)字段信息；

分別響應(yīng)用戶對所述交換服務(wù)信息及數(shù)據(jù)字段信息進行關(guān)聯(lián)設(shè)置的操作，并獲取經(jīng)過關(guān)聯(lián)設(shè)置的交換服務(wù)信息及數(shù)據(jù)字段信息；

當用戶需要對交換服務(wù)中的數(shù)據(jù)進行過濾時，響應(yīng)用戶對數(shù)據(jù)進行過濾條件設(shè)置的操作，以對所述數(shù)據(jù)進行過濾。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述第一服務(wù)器基于所述挖掘數(shù)據(jù)信息進行變量定義，以便進行模型運算的步驟包括：

響應(yīng)用戶對需要進入模型運算的數(shù)據(jù)字段進行參數(shù)配置的操作；

將需要進行模型運算的數(shù)據(jù)字段進行轉(zhuǎn)換定義，轉(zhuǎn)換為可帶入模型中進行運算的變量。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述第一服務(wù)器響應(yīng)用戶對需要進入模型運算的數(shù)據(jù)字段進行參數(shù)配置的操作的步驟包括：

基于獲取的數(shù)據(jù)字段信息進行字段類型定義，并根據(jù)數(shù)據(jù)字段類型配置默認的變量數(shù)據(jù)類型；

響應(yīng)用戶對不同類型的數(shù)據(jù)字段進行離散化設(shè)置的操作，以便對所述數(shù)據(jù)字段進行分類，其中，所述離散化設(shè)置包括：分段設(shè)置、歸類設(shè)置及標簽設(shè)置；

響應(yīng)用戶對插補數(shù)據(jù)進行類型選擇的操作，當數(shù)據(jù)字段中存在缺失數(shù)據(jù)時，服務(wù)器基于用戶選擇的插補數(shù)據(jù)類型對缺失數(shù)據(jù)進行插補取值。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述第一服務(wù)器獲取用戶在瀏覽器界面選擇的模型信息，并將挖掘數(shù)據(jù)信息及選擇的所述模型信息發(fā)送給分布式集群組的步驟包括：

獲取用戶在瀏覽器界面選擇的模型信息；

基于用戶選擇的模型信息配置相應(yīng)的挖掘算法，并通過瀏覽器顯示給用戶；

為每種模型配置默認的分析參數(shù)，并通過瀏覽器顯示給用戶；

響應(yīng)用戶對所述挖掘算法及分析參數(shù)進行更改的操作；

將挖掘數(shù)據(jù)信息及選擇的所述模型信息發(fā)送給所述分布式集群組的多個第二服務(wù)器，其中，所述挖掘數(shù)據(jù)信息包括：挖掘算法、分析參數(shù)及經(jīng)過轉(zhuǎn)換定義的變量。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述分布式集群組接收所述第一服務(wù)器發(fā)送的所述挖掘數(shù)據(jù)信息及選擇的模型信息，根據(jù)用戶選擇的模型進行模型運算及挖掘分析的步驟包括：

多個第二服務(wù)器接收所述第一服務(wù)器發(fā)送的所述挖掘數(shù)據(jù)信息及選擇的模型信息；

多個第二服務(wù)器基于所述挖掘數(shù)據(jù)信息對用戶選擇的模型進行運算，對運算結(jié)果進行挖掘分析；

多個第二服務(wù)器對經(jīng)過運算及分析的數(shù)據(jù)結(jié)果及模型結(jié)果進行存儲。

7.根據(jù)權(quán)利要求4所述的方法，其特征在于，在所述第一服務(wù)器基于所述挖掘數(shù)據(jù)信息進行變量定義的步驟之前，所述方法還包括：

第一服務(wù)器響應(yīng)用戶點擊的預(yù)分析操作，對所述挖掘數(shù)據(jù)信息進行預(yù)分析，并將預(yù)分析結(jié)果通過瀏覽器顯示給用戶，以便響應(yīng)用戶根據(jù)所述預(yù)分析結(jié)果對所述數(shù)據(jù)字段進行離散化設(shè)置的操作。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述方法還包括：

第一服務(wù)器對創(chuàng)建的挖掘分析模型進行管理，所述第一服務(wù)器對創(chuàng)建的挖掘分析模型進行管理的步驟包括：

將分析結(jié)果通過瀏覽器顯示給用戶；

響應(yīng)用戶對分析結(jié)果進行的后續(xù)操作，所述后續(xù)操作包括：生成數(shù)據(jù)圖形、發(fā)布分析結(jié)果、模型及算法重置、模型刷新及刪除。