[發明專利]標注任務分派策略方法、裝置在審
| 申請號: | 202110445705.4 | 申請日: | 2021-04-25 |
| 公開(公告)號: | CN112860416A | 公開(公告)日: | 2021-05-28 |
| 發明(設計)人: | 李圣權;黃逢春;毛云青 | 申請(專利權)人: | 城云科技(中國)有限公司 |
| 主分類號: | G06F9/48 | 分類號: | G06F9/48;G06K9/62 |
| 代理公司: | 無錫市匯誠永信專利代理事務所(普通合伙) 32260 | 代理人: | 李珍珍 |
| 地址: | 310052 浙江省杭州市濱江區長*** | 國省代碼: | 浙江;33 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 標注 任務 分派 策略 方法 裝置 | ||
本申請提出了一種標注任務分派策略方法、裝置,其中所述方法將包含相同所述場景分類的所述待標注項目輸入分類模型中比對所述場景要素,獲取所述分類模型輸出的每個相同所述場景分類下所述待標注項目的場景相似度。通過將超過場景相似閾值的所述待標注項目分配給多個目標標注員避免了批量任務被分配給其中一個或某幾個標注員導致整個場景的標注誤判情況發生。
技術領域
本申請涉及數據標注領域,特別是涉及標注任務分派策略方法、裝置。
背景技術
在人工智能領域,特別是圖像識別場景中,圖片數據標注是一項基礎但重要程度高、專業程度強的工作。圖片數據標注通常是將很多標注任務(圖片)分派給不同的標注員進行審核標注,而待標注的任務(圖片)往往有“批量”的特點,即一組待標注任務(圖片)通常是相似場景甚至是同一個場景下的數據。傳統的標注任務分派策略將圖片簡單的平分給多個標注員,這種方式會存在某個具體的場景圖片只會被單個標注員處理的情況,此時若標注員對該場景的數據出現了誤判,那么整個批次相同以及相似場景下的圖片數據都會出現同樣的誤判行為,這對后續的算法再學習帶來了負面影響。
此外,傳統的標注任務(圖片)的分派方法未考慮到標注人員的狀態,比如標注人員的出勤情況、標注速度和任務飽和度等外在因素,這可能會導致分派后的任務(圖片)出現積壓阻塞等問題。
發明內容
本申請實施例提供了標注任務分派策略方法、裝置,可以解決多人互保時的識別用戶是否為高風險用戶的問題。
第一方面,本申請實施例提供了一種標注任務分派策略方法,包括以下步驟:獲取標注員名單以及標注任務并確定所述標注任務的任務屬性信息,其中,所述標注任務包括至少一待標注項目;從所述標注員名單中篩選與所述標注任務的所述任務屬性信息相匹配的標注員集合;獲取所述待標注項目的場景要素信息,所述場景要素信息包括至少一場景類別及與所述場景類別對應的場景要素;將包含相同所述場景類別的所述待標注項目輸入分類模型中比對所述場景要素,獲取所述分類模型輸出的每個相同所述場景類別下所述待標注項目的場景相似度;基于所述待標注項目的場景相似度分配所述標注任務。
第二方面,本申請實施例提供了一種標注任務分派策略裝置,包括:第一獲取模塊,用于獲取標注員名單以及標注任務并確定所述標注任務的任務屬性信息,其中,所述標注任務包括至少一待標注項目;篩選模塊,用于篩選與所述標注任務的所述任務屬性信息相匹配的標注員集合;第二獲取模塊,用于獲取所述待標注項目的場景要素信息,所述場景要素信息包括至少一場景類別及與所述場景類別對應的場景要素;比對模塊,用于將包含相同所述場景類別的所述待標注項目輸入分類模型中比對所述場景要素,獲取所述分類模型輸出的每個相同所述場景類別下所述待標注項目的場景相似度;分配模塊,用于基于所述待標注項目的場景相似度分配所述標注任務。
第三方面,本申請提出了一種計算機設備,所述計算機設備包括一個或多個處理器和一個或多個存儲器,所述一個或多個存儲器中存儲有至少一條程序代碼,所述至少一條程序代碼由所述一個或多個處理器加載并執行以實現如第一方面所述的標注任務分派策略方法所執行的操作。
第四方面,本申請提出了一種存儲介質,所述存儲介質中存儲有計算機程序,其中,所述計算機程序被設置為運行時執行如第一方面所述的標注任務分派策略方法。
本發明的主要貢獻和創新點如下:
本方案提出了一種標注任務分派策略方法和裝置,通過比對待標注項目的場景相似度,為場景相似度超過閾值的待標注項目分配到不同的目標標注員中,避免了在標注任務分派時,出現相同及相似場景的圖片標注任務被分派給少數甚至是只有一個標注員;以及為了給標注任務的分派帶來無規律性,不讓標注員的部分異常判斷習慣大面積的污染了標記結果數據,以致后續的算法再學習出現較大偏差。
本申請的一個或多個實施例的細節在以下附圖和描述中提出,以使本申請的其他特征、目的和優點更加簡明易懂。
附圖說明
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于城云科技(中國)有限公司,未經城云科技(中國)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110445705.4/2.html,轉載請聲明來源鉆瓜專利網。





