[發明專利]一種面向新零售的圖像自動標注系統及方法

有效

• 申請號: 202010122977.6
• 申請日: 2020-02-27
• 公開（公告）號: CN111259184B
• 公開（公告）日: 2022-03-08
• 發明（設計）人: 黃聯芬;劉文斌;林和志;郭洋洋;唐凌;鄭庚;林英;許榮賀;王豐
• 申請（專利權）人: 廈門大學;福建聯迪商用設備有限公司
• 主分類號: G06F16/58
• 分類號: G06F16/58
• 代理公司: 福州元創專利商標代理有限公司 35100
• 代理人: 陳明鑫;蔡學俊

本發明涉及一種面向新零售的圖像自動標注系統及方法。所述體現包括獲取待標注圖片和待標注圖片對應的用于自動標注圖片的測試單元，獲取待標注圖片中目標的位置信息和目標的標簽的級聯網絡測試單元，檢查標注結果是否是Ground Truth的測試單元，獲取標注結果的測試單元。訓練針對需要標注的目標的圖像分割模型，拍攝待標注圖片，以及在待標注圖片的目標上放置寫有數字的紙片的用于自動標注的圖片，通過圖像分割網絡獲取圖片中目標的位置信息，并檢查是否有誤，通過深度學習網絡獲取目標上數字信息，檢查無誤后，通過數字與標簽的對應關系確認目標的標簽，將待標注圖片的文件名，利用圖片中各個目標的位置信息和標簽，生成.csv格式文件，完成自動標注。

技術領域

本發明涉及圖像標注技術領域，特別是一種面向新零售的圖像自動標注系統及方法。

背景技術

圖像標注，是標注出圖像中目標的位置和標簽的技術。人工智能技術的普及，使得數據標注作為一個新的行業出現在眾人面前，在機器視覺領域，圖像標注又成了一項需求量大但是復雜繁瑣的工作，提高圖像標注的效率成為了熱點。

傳統的標注方法，是在原始圖像中標注目標物體位置并對每張圖片生成相應的標注文件表示目標的位置信息和目標的標簽。傳統的標注方法可靠性高，但是存在著效率低下，人力資源浪費嚴重的問題。現有的自動標注技術是利用一個已經訓練好的針對特定場景的目標識別網絡來進行標注，這樣的標注方法自動化程度高，但是不能保證標注結果的正確性，標簽的針對性強，擴展性差。相較之下，本發明提出的圖像自動標注方法，標注過程為自動標注，能快速處理大批量的圖片，效率高，通過在關鍵環節人為檢查標注的準確性確保標注的正確率，通過利用級聯的網絡結構，第一網絡實現圖像分割，第二個網絡完成數字識別的任務，通過數字對應標簽的方法，加強了添加標簽的靈活性。

發明內容

本發明的目的在于提供一種面向新零售的圖像自動標注方法，以克服現有技術中存在的缺陷。

為實現上述目的，本發明的技術方案是：一種面向新零售的圖像自動標注系統，包括：

用于獲取待標注圖片和待標注圖片對應的用于自動標注圖片的測試單元，通過平臺與攝像頭相對位置固定的設備，拍攝待標注圖片后，在目標上放置寫有數字的紙片再進行一次拍照獲取待標注圖片的用于自動標注的對應圖片；

用于獲取待標注圖片中目標的位置信息和目標的標簽的級聯網絡測試單元，通過訓練好的針對目標的圖像分割網絡獲取圖像中目標的位置信息，通過深度學習網絡識別放置在目標上的數字，通過數字與標簽的對應關系得到目標的標簽；

檢查標注結果是否是Ground Truth的測試單元，用于確認標注的結果是否準確，在使用圖像分割網絡獲取待標注圖片中的位置信息時，檢查位置信息是否有錯誤，如果有錯誤則將錯誤的圖片挑選出來進行標注，在識別目標上的數字后，將各目標以及各目標對應的數字顯示出來，檢測是否有錯誤，如果有錯誤則修改目標的標簽；

獲取標注結果測試單元，用于生成.csv文件，通過編寫的python代碼將每張圖片的每一個目標的位置信息和目標的標簽和圖片的名稱寫入.csv格式文件并保存。

本發明還提供了一種面向新零售的圖像自動標注方法，包括如下步驟：

步驟S1：對需要標注的目標建立數據集，通過該數據集訓練一個圖像分割模型，以獲取需要標注目標的位置信息；

步驟S2：通過一平臺與攝像頭相對位置固定的設備，拍攝待標注圖片后，在目標上放置寫有數字的紙片再進行一次拍照獲取待標注圖片用于自動標注的對應的圖片，制作待標注的數據集；

步驟S3：通過步驟S1所述的圖像分割模型獲取標注圖片的用于自動標注的對應圖片中的各個目標的位置信息，檢查是否有誤，如果有誤，則不再繼續進行標注并保存到用于保存需要標注的圖片的文件夾中；