[發明專利]一種基于用戶不一致性信息的協同眾包質量控制方法

在審

• 申請號: 201810325877.6
• 申請日: 2018-04-12
• 公開（公告）號: CN108647858A
• 公開（公告）日: 2018-10-12
• 發明（設計）人: 孫玉靈;王美紅;賀樑
• 申請（專利權）人: 華東師范大學
• 主分類號: G06Q10/06
• 分類號: G06Q10/06
• 代理公司: 上海藍迪專利商標事務所(普通合伙) 31215
• 代理人: 徐筱梅;張翔

1.一種基于用戶不一致性信息的協同眾包質量控制方法，其特征在于，充分利用用戶的不一致性信息來發現海量眾包任務中的歧義任務，并通過迭代優化的方式提升任務質量；該方法包括以下具體步驟：

第一步：通過眾包平臺對大規模眾包任務進行發布，要求工作者提供答案A、答案B或“不確定”選項；

第二步：判斷題目是否產生差異化較大的不一致答案：如果未產生，則直接確定該題目的最終答案；如果產生，將題目放入不確定集合{N}中，進入第三步；

第三步：對于不確定集合{ N }中的題目，要求提供負向或者不確定答案的用戶給出解釋性信息，轉向第四步；

第四步：分析用戶的反饋信息，得到冗余的備選類別；

第五步：通過迭代的方式對不確定集合{N}中的題目逐一進行答案修正；首先向用戶展示需要進行修正的題目{Ni},以及通過第四步得到的冗余備選類別；用戶一對{Ni}題目進行挑戰，選擇或填寫自己認為正確的答案；然后用戶二對用戶一的答案進行判定；如果用戶二贊同，轉第六步；如果用戶二不贊同，轉第七步；

第六步：用戶一的答案被選擇為最終答案；此題判定結束，用戶一獲得雙倍獎勵，用戶二獲得單倍獎勵；結束；

第七步：用戶二對{Ni}題目進行挑戰，選擇或填寫自己認為正確的答案；用戶三對用戶一和用戶二的答案進行判定；如果贊同用戶一，轉第八步；如果贊同用戶二，轉第九步；如果都不贊同，轉第十步；

第八步：用戶一答案被選擇為最終答案；此題判定結束，用戶一獲得雙倍獎勵，用戶三獲得單倍獎勵；結束；

第九步：用戶二答案被選擇為最終答案；此題判定結束，用戶二獲得雙倍獎勵，用戶三獲得單倍獎勵；結束；

第十步：隨機選擇一個答案為最終答案，都無獎勵；結束。