[發(fā)明專利]基于敏感數(shù)據(jù)的大數(shù)據(jù)處理方法、裝置、設備和存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201910876650.5
• 申請日: 2019-09-17
• 公開（公告）號: CN110674373B
• 公開（公告）日: 2020-08-07
• 發(fā)明（設計）人: 張少典;馬漢東
• 申請（專利權）人: 上海森億醫(yī)療科技有限公司
• 主分類號: G06F16/9035
• 分類號: G06F16/9035
• 代理公司: 上海光華專利事務所(普通合伙) 31219
• 代理人: 倪靜

1.一種基于敏感數(shù)據(jù)的大數(shù)據(jù)處理方法，其特征在于，所述方法包括：

S1：依據(jù)預設條件確立樣本數(shù)量，并依據(jù)所述樣本數(shù)量確立狀態(tài)函數(shù)；其中，所述狀態(tài)函數(shù)是根據(jù)所述樣本數(shù)量建立的篩選流程；所述狀態(tài)函數(shù)為基于多個狀態(tài)屬性而構建的表征數(shù)據(jù)系統(tǒng)發(fā)生改變的函數(shù)；

S2：根據(jù)所述狀態(tài)函數(shù)篩選種子數(shù)，將滿足篩選條件的所述種子數(shù)加入?yún)?shù)集合；其中，包括：

調(diào)取原始數(shù)據(jù)集合；

隨機抽取一個樣本作為所述種子數(shù)，帶入所述狀態(tài)函數(shù)進行計算；

判斷是否滿足所述篩選條件中對應多種參數(shù)要求的評價指標；若滿足，進行下一步驟，反之，跳轉至上一步驟；

計算所述狀態(tài)函數(shù)是否滿足要求，若滿足，進行下一步驟，反之，跳轉至最后一步驟；

將滿足要求的所述種子數(shù)加入所述參數(shù)集合；

拆解所述狀態(tài)函數(shù)以分析不滿足要求條件，將最優(yōu)樣本加入所述參數(shù)集合；

S3：判斷參數(shù)集合是否滿足所述樣本數(shù)量，若滿足則輸出參數(shù)集合，反之，則跳轉至上一步驟S2。

2.根據(jù)權利要求1所述的方法，其特征在于，所述原始數(shù)據(jù)集合為去除敏感數(shù)據(jù)的大數(shù)據(jù)集合；所述參數(shù)集合為樣本數(shù)據(jù)集合。

3.根據(jù)權利要求1所述的方法，其特征在于，所述篩選條件是根據(jù)所述原始數(shù)據(jù)集合中的具體參數(shù)類別建立的。

4.根據(jù)權利要求1所述的方法，其特征在于，所述狀態(tài)函數(shù)通過動態(tài)規(guī)劃 算法進行拆解。

5.根據(jù)權利要求1所述的方法，其特征在于，所述拆解所述狀態(tài)函數(shù)以分析不滿足要求條件，將最優(yōu)樣本加入所述參數(shù)集合，包括：

隨機調(diào)取不滿足所述篩選條件的樣本；

將不滿足所述篩選條件的大問題拆分成若干小問題的合集；

按照步驟從小問題的最后一步進行倒推，依據(jù)所述狀態(tài)函數(shù)找出不滿足條件的原因，并根據(jù)原因分析所述狀態(tài)函數(shù)對應的所述篩選條件中不完善條件，重復上述步驟得到若干個不滿足樣本；

根據(jù)篩選條件選出不滿足樣本中能夠優(yōu)化狀態(tài)函數(shù)的最優(yōu)解作為最優(yōu)樣本；

輸出所述最優(yōu)樣本以加入所述參數(shù)集合。

6.根據(jù)權利要求5所述的方法，其特征在于，所述狀態(tài)函數(shù)是根據(jù)所述樣本數(shù)量建立的篩選流程，能根據(jù)所述不滿足樣本進行實時調(diào)整。

7.一種大數(shù)據(jù)處理裝置，其特征在于，所述裝置包括：

確立模塊，用于依據(jù)預設條件確立樣本數(shù)量，并依據(jù)所述樣本數(shù)量確立狀態(tài)函數(shù)；其中，所述狀態(tài)函數(shù)是根據(jù)所述樣本數(shù)量建立的篩選流程；所述狀態(tài)函數(shù)為基于多個狀態(tài)屬性而構建的表征數(shù)據(jù)系統(tǒng)發(fā)生改變的函數(shù)；

處理模塊，用于根據(jù)所述狀態(tài)函數(shù)篩選種子數(shù)，將滿足篩選條件的所述種子數(shù)加入?yún)?shù)集合；其中，包括：調(diào)取原始數(shù)據(jù)集合；隨機抽取一個樣本作為所述種子數(shù)，帶入所述狀態(tài)函數(shù)進行計算；判斷是否滿足所述篩選條件中對應多種參數(shù)要求的評價指標；若滿足，進行下一步驟，反之，跳轉至上一步驟；計算所述狀態(tài)函數(shù)是否滿足要求，若滿足，進行下一步驟，反之，跳轉至最后一步驟；將滿足要求的所述種子數(shù)加入所述參數(shù)集合；拆解所述狀態(tài)函數(shù)以分析不滿足要求條件，將最優(yōu)樣本加入所述參數(shù)集合；判斷參數(shù)集合是否滿足所述樣本數(shù)量，若滿足則輸出參數(shù)集合，反之，則跳轉至上一步驟。

8.一種計算機設備，其特征在于，所述設備包括：存儲器、及處理器；所述存儲器用于存儲計算機指令；所述處理器運行計算機指令實現(xiàn)如權利要求1至6中任意一項所述的方法。

9.一種計算機可讀存儲介質(zhì)，其特征在于，存儲有計算機指令，所述計算機指令被運行時執(zhí)行如權利要求1至6中任一項所述的方法。