[發明專利]一種云數據的處理方法及裝置

有效

• 申請號: 201610799726.5
• 申請日: 2016-08-31
• 公開（公告）號: CN107783843B
• 公開（公告）日: 2021-08-06
• 發明（設計）人: 孫翠鋒
• 申請（專利權）人: 中國移動通信有限公司研究院;中國移動通信集團公司
• 主分類號: G06F9/52
• 分類號: G06F9/52;G06F9/54;G06F9/50
• 代理公司: 北京銀龍知識產權代理有限公司 11243
• 代理人: 許靜;安利霞

本發明的實施例提供一種云數據的處理方法及裝置，方法包括：獲得待處理任務的云關聯數據；在待處理任務的云關聯數據首次加鎖處理不成功，且所述云關聯數據為云沖突確認數據時，將該待處理任務調度到沖突處理隊列；否則，對該云關聯數據進行再次加鎖處理；在該云關聯數據再次加鎖處理不成功的次數超過一限定值時，輸出云沖突告警數據。本發明的方案將沖突任務調度到單獨的沖突處理隊列統一處理，不再作為云化環境下的任務，進行并發調度，從而避開沖突。

技術領域

本發明涉及云數據處理技術領域，特別是指一種云數據的處理方法及裝置。

背景技術

現有技術中，云數據處理環境中，調度機制一般有如下幾種：

搶占式調度機制：云化環境中，在各任務處理節點的處理進程空閑時，主動查詢任務處理隊列中待處理任務，按照一定規則獲得某待處理任務的處理權，并對搶占的任務進行鎖定防止被其他節點重復處理的機制。

分配式調度機制：云化環境中，由任務調度進程把隊列中待處理任務按忙閑程度和一定規則分配到各處理節點，各個處理節點對分配的任務進行處理。

自治的任務：任務處理的數據不涉及任務外其他數據的變化，變化數據只與任務本身數據有關，這種任務稱為自治的任務，自治的任務不存在沖突。

非自治的任務：任務處理的數據除了與任務本身相關外，還涉及變更任務外其他的數據，這種任務為非自治的任務。

云關聯處理數據：與非自治任務相關的不在任務包含數據內需要變更的數據，這種數據與任務自身的數據存在關聯關系，一般為任務處理的中間數據或結果數據。如電信業中話單處理任務中的用戶賬單就是云關聯數據。

云沖突告警數據(CWD)：云計算處理非自治的任務時出現加鎖失敗后輸出的告警數據。

云沖突數據(CD)：云計算產生的沖突告警數據，經過告警進程處理確認后生成云沖突數據記錄，云沖突數據包括數據主鍵、數據類型、最近沖突次數、最近沖突發現時間、狀態(云沖突數據狀態為“云沖突”，當變為云沖突確認數據時狀態會更新)等信息。

云沖突數據有效時間(CDVT)：云沖突數據只在沖突出現的一段時間內有效，當超過一段時間后沖突可能消失，這段云沖突出現到消失的時間稱之為云沖突數據有效時間，該時間在系統內根據經驗值評估可以設定為一個參數常量VT。在云沖突數據有效時間的云沖突數據稱為有效云沖突數據，否則稱為失效云沖突數據。

云沖突確認數據(CCD)：當云沖突數據在CDVT內的沖突次數超過設定值MC時，該云沖突數據稱為云沖突確認數據，MC稱為沖突確認閥值。云沖突確認數據是一種云沖突數據，保存在云沖突數據中，只是以單獨的狀態進行標識。

現有的任務處理機制中，在基于消息、文件、數據庫表記錄作為處理對象的云處理系統中，為了達到任務在各處理節點的均衡分配，主要有搶占式和分發式兩種任務調度機制。

這兩種調度機制，分配處理任務時只會根據任務分配的規則、任務自身包含的數據、任務關聯的其他數據(其他數據不含非本任務之外其他任務的數據)來進行任務處理，不會去關聯其他任務包含的數據進行處理。

舉例來說：電信業的話單批價處理，處理話單文件時是根據話單文件的記錄數據、用戶資料、用戶的歷史消費情況、資費情況進行批價處理，兩個話單文件之間的不同任務在任務調度時沒有考慮關聯關系。

現有的云化環境下任務處理流程中，在輸出云沖突告警數據時，多次后輸出告警后，一般依靠人工將關聯的任務提取出來，并手工把任務分流到單獨非并發的沖突任務隊列處理，避免處理過程中再次出現鎖沖突。