[發明專利]一種標注管理的方法和系統

在審

• 申請號: 201810372152.2
• 申請日: 2018-04-24
• 公開（公告）號: CN110400029A
• 公開（公告）日: 2019-11-01
• 發明（設計）人: 袁征;王瑤;王霞;張睿;呂延猛;陳倩倩;馮玉敏;孫志梅;孫榮章;孫愛林;劉彥偉
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06Q10/06
• 分類號: G06Q10/06;G06Q10/10
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;李陽

1.一種標注管理的方法，其特征在于，包括：

獲取待標注數據，以創建待標注數據的標注任務；

分配標注人員，以領取標注任務和對應的待標注數據；

根據標注任務對待標注數據進行標注，以獲得標注結果數據，通過預設的容錯率對標注結果數據進行審核，將審核通過的標注結果數據上傳以及調整預設的容錯率。

2.根據權利要求1所述的方法，其特征在于，分配標注人員，以領取標注任務和對應的待標注數據之后，還包括：

在根據標注任務對待標注數據進行標注的過程中，在預設時間統計標注進度；

根據標注進度，獲得審核通過數量占比和任務使用時間占比；

當審核通過數量占比小于任務使用時間占比時，補充分配標注人員。

3.根據權利要求1所述的方法，其特征在于，調整預設的容錯率，包括：

計算審核未通過的標注結果數據的占比；

當所述占比大于預設閾值，則調整預設的容錯率。

4.根據權利要求1所述的方法，其特征在于，根據標注任務對待標注數據進行標注，以獲得標注結果數據，通過預設的容錯率對標注結果數據進行審核，包括：

在待標注數據中選取預設數量的樣本數據，以創建樣本數據標注任務；根據樣本數據標注任務，對樣本數據進行標注以獲取樣本數據標注結果；

根據標注任務對待標注數據進行標注，在獲取的標注結果數據中查找樣本數據對應的標注結果數據；

將樣本數據對應的標注結果數據與樣本數據標注結果進行比對，以獲得比對結果；

根據比對結果和預設的容錯率，確定是否審核通過。

5.一種標注管理的裝置，其特征在于，包括：

任務分配層，用于獲取待標注數據，以創建待標注數據的標注任務；

標注層，用于分配標注人員，以領取標注任務和對應的待標注數據，然后根據標注任務對待標注數據進行標注，獲得標注結果數據；

審核層，用于通過預設的容錯率對標注結果數據進行審核，將審核通過的標注結果數據上傳以及調整預設的容錯率。

6.根據權利要求5所述的裝置，其特征在于，所述標注層，還用于：

在根據標注任務對待標注數據進行標注的過程中，在預設時間統計標注進度；

根據標注進度，獲得審核通過數量占比和任務使用時間占比；

當審核通過數量占比小于任務使用時間占比時，補充分配標注人員。

7.根據權利要求5所述的裝置，其特征在于，所述審核層調整預設的容錯率，包括：

計算審核未通過的標注結果數據的占比；

當所述占比大于預設閾值，則調整預設的容錯率。

8.根據權利要求5所述的裝置，其特征在于，所述標注層根據標注任務對待標注數據進行標注，以獲得標注結果數據，包括：

在待標注數據中選取預設數量的樣本數據，以創建樣本數據標注任務；根據樣本數據標注任務，對樣本數據進行標注以獲取樣本數據標注結果；

根據標注任務對待標注數據進行標注，在獲取的標注結果數據中查找樣本數據對應的標注結果數據；

所述審核層通過預設的容錯率對標注結果數據進行審核，包括：

將樣本數據對應的標注結果數據與樣本數據標注結果進行比對，以獲得比對結果；

根據比對結果和預設的容錯率，確定是否審核通過。

9.一種電子設備，其特征在于，包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當所述一個或多個程序被所述一個或多個處理器執行，使得所述一個或多個處理器實現如權利要求1-4中任一所述的方法。

10.一種計算機可讀介質，其上存儲有計算機程序，其特征在于，所述程序被處理器執行時實現如權利要求1-4中任一所述的方法。