[發明專利]數據處理方法及系統、候選數據池、電子設備、計算機可讀存儲介質

有效

• 申請號: 202010188264.X
• 申請日: 2020-03-17
• 公開（公告）號: CN111368207B
• 公開（公告）日: 2023-09-22
• 發明（設計）人: 羅華林;徐夢遠;賈滕陽;楊光
• 申請（專利權）人: 北京奇藝世紀科技有限公司
• 主分類號: G06F16/9535
• 分類號: G06F16/9535;G06F16/215;G06F16/23
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 莎日娜

1.一種數據處理方法，其特征在于，應用于包括候選數據池和數據使用方的系統，所述方法執行于所述候選數據池，所述方法包括：

獲取所述數據使用方發送的第一數據請求；

判斷所述第一數據請求所請求的第一目標數據上一次更新的第一時刻，距離接收所述第一數據請求的第二時刻的第一時長，是否大于預先確定的數據有效窗口的時長；

在所述第一時長小于或等于所述數據有效窗口的時長的情況下，判斷所述第一目標數據是否與數據有效規則相匹配；所述數據有效規則包括對數據內容的要求；

其中，所述第一目標數據是所述候選數據池中存儲的數據，所述數據有效規則包括至少一種對數據的特征的要求；

所述數據有效規則還包括對數據結構的要求；

在判斷所述第一目標數據是否與所述數據有效規則相匹配之后，所述數據處理方法還包括：

在所述第一目標數據的數據結構與所述數據有效規則中對數據結構的要求不匹配的情況下，獲取所述第二時刻之前第一預設時間內被請求的數據中數據結構發生變化的第二目標數據，并對所述第一目標數據和所述第二目標數據進行更新；

所述第二目標數據包括至少一次第二數據請求所請求的數據；

所述對所述第一目標數據和所述第二目標數據進行更新，包括：

獲取所述第一目標數據的第一生產方的數據傳輸接口的每秒查詢率，以及每一次所述第二數據請求所請求的數據的第二生產方的數據傳輸接口的每秒查詢率；

計算所述第一目標數據的大小與所述第一生產方的數據傳輸接口的每秒查詢率的比值，以及，每一次所述第二數據請求所請求的數據的大小與對應的所述第二生產方的數據傳輸接口的每秒查詢率的比值；

根據所述比值的大小，將所述第一目標數據的更新任務和所述至少一次第二數據請求所請求的數據的更新任務添加到不同的任務隊列；

分別執行所述任務隊列中的數據更新任務，其中，不同任務隊列的任務并行處理，同一任務隊列的任務按照在隊列中的排序順序執行。

2.根據權利要求1所述的數據處理方法，其特征在于，還包括：

在所述第一時長大于所述數據有效窗口的時長的情況下，對所述第一目標數據進行更新；

在所述第一目標數據的數據內容與所述數據有效規則中對數據內容的要求不匹配的情況下，對所述第一目標數據進行更新。

3.根據權利要求1所述的數據處理方法，其特征在于，還包括：

在接收到用戶輸入的情況下，獲取第三目標數據，所述第三目標數據中包括至少一次第三數據請求所請求的數據中數據結構發生變化的數據，所述至少一次第三數據請求是處于所述用戶輸入的接收時刻之前的第二預設時間內的數據請求；

對所述第三目標數據進行更新；

其中，若所述第一數據請求處于所述第二預設時間內，則所述至少一次第三數據請求中包括所述第一數據請求；若所述第一數據請求處于所述第二預設時間之外，則所述至少一次第三數據請求中不包括所述第一數據請求。

4.根據權利要求3所述的數據處理方法，其特征在于，所述對所述第三目標數據進行更新，包括：

獲取每一次所述第三數據請求所請求的數據的第三生產方的數據傳輸接口的每秒查詢率；

計算每一次所述第三數據請求所請求的數據的大小與對應的所述第三生產方的數據傳輸接口的每秒查詢率的比值；

根據所述比值的大小，將各第三數據請求所請求的數據的更新任務添加到不同的任務隊列；

分別執行所述任務隊列中的數據更新任務，其中，不同任務隊列的任務并行處理，同一任務隊列的任務按照在隊列中的排序順序執行。