[發明專利]基于人工智能的陳列物品審核方法、裝置

有效

• 申請號: 202010300775.6
• 申請日: 2020-04-16
• 公開（公告）號: CN111507253B
• 公開（公告）日: 2023-06-30
• 發明（設計）人: 郭卉;黃飛躍;袁豪磊;郭曉威
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/44;G06V10/56;G06V10/764;G06V10/82;G06N3/0464;G06N3/08
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 趙翠萍;張穎玲

1.一種基于人工智能的陳列物品審核方法，其特征在于，所述方法包括：

確定待識別圖片包括的多個陳列場景候選區域，并提取每個陳列場景候選區域的圖像特征；

基于所述每個陳列場景候選區域的圖像特征，從所述每個陳列場景候選區域中識別出陳列場景的類型和所述陳列場景的位置；

基于所述陳列場景的位置所對應的區域的圖像特征，進行與所述陳列場景的類型對應的物品識別處理，以確定所述陳列場景中陳列的物品的類型以及所述物品的位置；

針對所述陳列場景中每個類型的物品執行以下操作：

基于所述物品的位置在所述待識別圖片確定對應的成像區域，從所述成像區域中確定與所述陳列場景的類型對應的多個素材候選區域；

基于所述素材候選區域的圖像特征對所述素材候選區域進行分類處理，得到所述素材候選區域中包括的素材的類型；

基于所述素材候選區域的圖像特征對素材候選區域進行包圍框回歸處理，得到所述素材候選區域包括的包圍框的位置，以作為素材候選區域中包括的所述素材的位置；

將所述素材的類型與所述素材的位置作為所述陳列場景的素材審核結果，其中，所述素材審核結果用于確定所述素材的位置是否正確，以及確定所述素材的類型對應的所述成像區域中的所述物品的類型是否正確。

2.根據權利要求1所述的方法，其特征在于，所述確定待識別圖片包括的多個陳列場景候選區域，包括：

將所述待識別圖片劃分為多個子區域；

確定所述多個子區域中滿足至少一個維度的相似條件的多組子區域，其中，所述維度的類型包括尺寸、紋理、邊緣和顏色；

將所述多組子區域中的每組所述子區域分別進行合并，對應得到多個陳列場景候選區域；

所述提取每個陳列場景候選區域的圖像特征，包括：

對每個所述陳列場景候選區域進行卷積操作，得到包括紋理、邊緣和顏色至少之一的圖像特征。

3.根據權利要求1所述的方法，其特征在于，所述基于所述每個陳列場景候選區域的圖像特征，從所述每個陳列場景候選區域中識別出陳列場景的類型和所述陳列場景的位置，包括：

基于所述每個陳列場景候選區域的圖像特征對所述陳列場景候選區域進行分類處理，得到所述陳列場景候選區域對應多個候選場景類型的概率，將最大概率對應的候選場景類型確定為所述陳列場景候選區域包括的陳列場景的類型；

基于所述陳列場景候選區域的圖像特征對所述陳列場景候選區域進行包圍框回歸處理，得到所述陳列場景候選區域包括的陳列場景的包圍框的位置，以作為所述陳列場景的位置。

4.根據權利要求1所述的方法，其特征在于，所述基于所述陳列場景的位置所對應的區域的圖像特征，進行與所述陳列場景的類型對應的物品識別處理，以確定所述陳列場景中陳列的物品的類型以及所述物品的位置，包括：

從所述陳列場景的位置所對應的區域中確定多個子區域，以作為物品候選區域；

基于所述物品候選區域的圖像特征對所述物品候選區域進行分類處理，得到所述物品候選區域中包括的物品的類型，其中，所述物品的類型與所述陳列場景的類型對應；

基于所述物品候選區域的圖像特征對所述物品候選區域進行包圍框回歸處理，得到所述物品候選區域包括的包圍框的位置，以作為所述物品候選區域中包括的所述物品的位置。

5.根據權利要求1所述的方法，其特征在于，所述方法還包括：

基于所述陳列場景中每個物品的位置中的縱坐標，確定任意兩個物品之間的縱向距離；

將縱向距離未超出縱向距離閾值的任意兩個物品識別為處于相同的陳列層，將縱向距離大于所述縱向距離閾值的任意兩個物品識別為處于不同的陳列層；

基于所識別出的陳列層以及所述陳列層中的物品，生成陳列層表；

基于所述陳列層中物品的類型和位置，確定所述陳列層表中不同類型的物品的分布情況，以作為所述陳列場景的陳列層審核結果。