[發明專利]指標評估的處理方法、裝置、設備及存儲介質

有效

• 申請號: 201910610384.1
• 申請日: 2019-07-08
• 公開（公告）號: CN110334955B
• 公開（公告）日: 2021-09-14
• 發明（設計）人: 周興
• 申請（專利權）人: 北京字節跳動網絡技術有限公司
• 主分類號: G06Q10/06
• 分類號: G06Q10/06
• 代理公司: 上海光柵知識產權代理有限公司 31340
• 代理人: 馬雯雯

1.一種指標評估的處理方法，其特征在于，包括：

實時監控緩存裝置中緩存的數據，每條數據中包括評估機的標識，所述評估機的標識與所述評估機的評估指標處理上限一一對應，所述評估指標處理上限用于表示所述評估機每次接收數據并進行處理的上限值；

在實時監控的預設周期范圍內，獲取所述緩存裝置中緩存的所有數據對應的多個評估機的標識；

針對所述多個評估機的標識中的每個評估機的標識，若所述評估機的標識對應的數據的數量小于或等于所述評估機的評估指標處理上限，則獲取所述評估機的標識對應的數據，并將所述評估機的標識對應的數據發送至所述評估機的標識對應的評估機中，以使所述評估機對所述評估機的標識對應的數據進行指標評估；

其中，所述每條數據還包括：預估值和真實值，所述預估值為通過模型機輸出的數據，所述真實值為未通過所述模型機處理的實際值，所述預估值與真實值一一對應，所述模型機對應至少一條數據；

所述緩存裝置中緩存的數據是通過至少一個所述模型機實時發送給所述緩存裝置進行緩存的；

其中，每個評估機用于評估對應的所述模型機的性能指標。

2.根據權利要求1所述的方法，其特征在于，在所述獲取所述緩存裝置中緩存的所有數據對應的多個評估機的標識之后，所述方法還包括：

根據所述多個評估機的標識，對所述緩存裝置中緩存的所有數據中含有相同評估機的標識的數據分別進行統計，得到每個評估機的標識對應的數據的數量。

3.根據權利要求1所述的方法，其特征在于，在所述獲取所述緩存裝置中緩存的所有數據對應的多個評估機的標識之后，所述方法還包括：

針對所述多個評估機的標識中的每個標識，若所述評估機的標識對應的數據的數量大于所述評估機的評估指標處理上限，則從所述評估機的標識對應的數據中確定發送給所述評估機的標識對應的評估機的目標數據，以使所述評估機對所述目標數據進行指標評估。

4.根據權利要求3所述的方法，其特征在于，每條數據還包括每條數據的緩存時間；

所述從所述評估機的標識對應的數據中確定發送給所述評估機的標識對應的評估機的目標數據，包括：

根據每條數據的緩存時間，對所述評估機的標識對應的所有數據進行時間先后順序的排序；

從排序后的所述評估機的標識對應的所有數據中選取所述評估機的評估指標處理上限對應數目的數據作為所述目標數據，并將所述評估機的標識對應的所有數據中除所述目標數據之外的剩余數據從所述緩存裝置中刪除。

5.根據權利要求3所述的方法，其特征在于，所述從所述評估機的標識對應的數據中確定發送給所述評估機的標識對應的評估機的數據，包括：

對所述評估機的標識對應的所有數據進行預定義采樣，得到所述評估機的評估指標處理上限對應數目的數據；

將所述評估機的評估指標處理上限對應數目的數據作為所述目標數據，并將所述評估機的標識對應的所有數據中除所述目標數據之外的剩余數據從所述緩存裝置中刪除。

6.一種指標評估的處理裝置，其特征在于，包括：

監控模塊，用于實時監控緩存裝置中緩存的數據，每條數據中包括評估機的標識，所述評估機的標識與所述評估機的評估指標處理上限一一對應，所述評估指標處理上限用于表示所述評估機每次接收數據并進行處理的上限值；

標識確定模塊，用于在實時監控的預設周期范圍內，獲取所述緩存裝置中緩存的所有數據對應的多個評估機的標識；

數據處理模塊，用于針對所述多個評估機的標識中的每個評估機的標識，若所述評估機的標識對應的數據的數量小于或等于所述評估機的評估指標處理上限，則獲取所述評估機的標識對應的數據，并將所述評估機的標識對應的數據發送至所述評估機的標識對應的評估機中，以使所述評估機對所述評估機的標識對應的數據進行指標評估；

所述每條數據還包括：預估值和真實值，所述預估值為通過模型機輸出的數據，所述真實值為未通過所述模型機處理的實際值，所述預估值與真實值一一對應，所述模型機對應至少一條數據；

所述緩存裝置中緩存的數據是通過至少一個所述模型機實時發送給所述緩存裝置進行緩存的；

其中，每個評估機用于評估對應的所述模型機的性能指標。