[發明專利]基于大數據和云計算的數據處理方法及大數據服務平臺

有效

• 申請號: 202010957749.0
• 申請日: 2020-09-14
• 公開（公告）號: CN112069242B
• 公開（公告）日: 2021-10-01
• 發明（設計）人: 鮑強;楊偉深
• 申請（專利權）人: 營口國申網絡科技有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/215;G06F21/45
• 代理公司: 北京成實知識產權代理有限公司 11724
• 代理人: 陳永虔

1.一種基于大數據和云計算的數據處理方法，其特征在于，包括：

獲取待驗證云業務數據，對所述待驗證云業務數據進行數據生成時刻補全，以將所述待驗證云業務數據補全為攜帶時序信息的云業務數據，得到補全后的目標云業務數據；

基于所述目標云業務數據，確定多組不同交互頻率的設備通信日志；分別檢測所述多組不同交互頻率的設備通信日志中的通信協議報文，以得到所述多組不同交互頻率的設備通信日志中的通信協議報文集；根據所述多組不同交互頻率的設備通信日志與所述目標云業務數據之間的時序相關性系數，將所述多組不同交互頻率的設備通信日志中的通信協議報文集映射到所述目標云業務數據中，得到多個映射報文字段；

根據所述多個映射報文字段之間的字段關聯性，對所述多個映射報文字段進行訪問權限識別，得到映射報文字段之間的交叉權限認證結果；

通過所述映射報文字段之間的交叉權限認證結果，提取所述目標云業務數據對應的數據訪問權限列表；

其中：

所述目標云業務數據對應的第一業務設備在訪問第二業務設備時，所述數據訪問權限列表用于指示所述第一業務設備在所述第二業務設備中的訪問路徑；

其中，根據所述多個映射報文字段之間的字段關聯性，對所述多個映射報文字段進行訪問權限識別，得到映射報文字段之間的交叉權限認證結果，包括：

基于所述多個映射報文字段對應的通信協議報文集的協議認證置信度確定訪問權限匹配清單；

根據確定出的訪問權限匹配清單確定所述映射報文字段之間的交叉權限認證結果；

其中，基于所述多個映射報文字段對應的通信協議報文集的協議認證置信度確定訪問權限匹配清單，根據確定出的訪問權限匹配清單確定所述映射報文字段之間的交叉權限認證結果，包括：

若所述多個映射報文字段中任兩個通信協議報文集的協議認證置信度與所述任兩個通信協議報文集中的一個通信協議報文集的協議認證置信度之間的差值的絕對值超過第一設定閾值，則生成所述任兩個通信協議報文集的權限比對列表，將所述任兩個通信協議報文集的權限比對列表作為所述任兩個通信協議報文集的訪問權限匹配清單；

若所述多個映射報文字段中任兩個通信協議報文集的報文編碼方式相同，且所述任兩個通信協議報文集的協議認證置信度與所述任兩個通信協議報文集中的一個通信協議報文集的協議認證置信度之間的差值的絕對值超過第二設定閾值，則將所述任兩個通信協議報文集的權限比對列表作為所述任兩個通信協議報文集的訪問權限匹配清單；其中，所述第一設定閾值大于所述第二設定閾值；

統計確定出的所有訪問權限匹配清單，并確定每組訪問權限匹配清單中的對應的兩個通信協議報文集的權限比對列表的權限一致性比對結果，從所述權限一致性比對結果提取出權限事件的比對相似率；其中，所述比對相似率用于表征對應的兩個通信協議報文集中，相同權限事件的數量與權限事件的總數的比值，每條權限事件對應一個業務訪問行為；

提取每組訪問權限匹配清單的清單特征，并將每組清單特征中用于表征所述訪問權限匹配清單的清單結構化信息的特征隊列按照設定轉換方式轉換為特征隊列描述值，對所述特征隊列描述值進行歸一化處理得到歸一化描述值；其中，所述歸一化描述值的取值范圍為0~1；

基于所述多個映射報文字段之間的字段關聯性為每個歸一化描述值分配第一排序權重，并基于所述通信協議報文集與所述多個映射報文字段之間的映射路徑節點參數為每個歸一化描述值分配第二排序權重；按照所述第一排序權重由大到小的順序對所述訪問權限匹配清單進行排序得到第一排序隊列并按照所述第二排序權重由大到小的順序對所述訪問權限匹配清單進行排序得到第二排序隊列；

針對所述所有訪問權限匹配清單中的當前訪問權限匹配清單，確定當前訪問權限匹配清單在所述第一排序隊列中的第一隊列位置以及在所述第二排序隊列中的第二隊列位置，計算當前訪問權限匹配清單的第一隊列位置和第二隊列位置之間的相對位置差值；判斷所述相對位置差值是否大于預設值，在所述相對位置差值大于所述預設值時，將當前訪問權限匹配清單進行標記，在所述相對位置差值小于或等于所述預設值時，將當前訪問權限匹配清單的下一個訪問權限匹配清單作為當前訪問權限匹配清單并返回確定當前訪問權限匹配清單在所述第一排序隊列中的第一隊列位置以及在所述第二排序隊列中的第二隊列位置的步驟；

根據標記得到的訪問權限匹配清單確定所述映射報文字段之間的交叉權限認證結果。