[發明專利]視頻處理方法、裝置及電子設備

有效

• 申請號: 201811457560.4
• 申請日: 2018-11-30
• 公開（公告）號: CN111263224B
• 公開（公告）日: 2022-07-15
• 發明（設計）人: 沈飛;楊浩;姜文暉;趙小偉;劉揚;文杰
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/442;G06V20/40;G06V40/20
• 代理公司: 北京太合九思知識產權代理有限公司 11610
• 代理人: 孫明子

1.一種視頻處理方法，其特征在于，包括：

獲取拍攝用戶行為的視頻流；

確定所述視頻流中用戶的手的移動軌跡；

查找所述視頻流中存在第一特征的視頻片段；

根據所述視頻片段確定是否出現與所述第一特征對應的第一預定行為；

根據所述視頻片段確定是否出現與所述第一特征對應的第一預定行為，包括：

在一件商品的跟蹤過程結束后，若在跟蹤過程中出現了存在第一特征的視頻片段，則判斷所述跟蹤過程中是否獲取到對商品的掃描結果；

若沒有獲取到掃描結果，則根據所述存在第一特征的視頻片段，判斷是否出現第一預定行為；其中，所述商品的跟蹤過程為所述商品被拿在手里的過程。

2.根據權利要求1所述的方法，其特征在于，所述視頻流為通過拍攝裝置獲取的視頻流；

所述拍攝裝置的拍攝范圍包括用于放置待掃碼商品的待掃碼區域以及用于放置已掃碼商品的已掃碼區域。

3.根據權利要求1所述的方法，其特征在于，所述第一特征為疑似漏掃行為的特征；所述第一預定行為為漏掃行為。

4.根據權利要求1所述的方法，其特征在于，所述存在第一特征的視頻片段包括掃碼動作的視頻片段和/或將商品移動至已掃碼區域的視頻片段。

5.根據權利要求1所述的方法，其特征在于，還包括：

檢測所述視頻流中商品和手的位置信息；

根據所述商品和手的位置信息，確定商品和手的運動軌跡；

根據商品與手的運動軌跡，確定商品是否被拿在手里。

6.根據權利要求5所述的方法，其特征在于，還包括：

在確定商品被拿在手里后，若檢測到空手的時間超過預設時間，則確定所述商品的跟蹤過程結束。

7.根據權利要求1所述的方法，其特征在于，還包括：

若在一件商品的跟蹤過程中獲取到掃描結果，則確定所述商品的跟蹤過程中沒有出現第一預定行為。

8.根據權利要求1所述的方法，其特征在于，根據所述存在第一特征的視頻片段，判斷是否出現第一預定行為，包括：

若所述跟蹤過程中有多個存在第一特征的視頻片段，則根據最后一個視頻片段判斷是否出現第一預定行為。

9.根據權利要求8所述的方法，其特征在于，根據最后一個視頻片段判斷是否出現第一預定行為，包括：

查找與所述最后一個視頻片段有重疊部分的其它視頻片段；

將查找到的視頻片段與所述最后一個視頻片段進行合并；

根據合并后的視頻片段，判斷是否出現第一預定行為。

10.根據權利要求1所述的方法，其特征在于，根據所述存在第一特征的視頻片段，判斷是否出現第一預定行為，包括：

通過機器學習模型確定存在第一特征的視頻片段屬于第一預定行為的置信度；

根據所述置信度判斷是否出現第一預定行為。

11.根據權利要求1所述的方法，其特征在于，根據所述存在第一特征的視頻片段，判斷是否出現第一預定行為，包括：

若所述跟蹤過程中有多個存在第一特征的視頻片段，則通過機器學習模型確定每個存在第一特征的視頻片段屬于第一預定行為的置信度；

計算所述多個存在第一特征的視頻片段對應的置信度的加權和；

若所述加權和大于預設的閾值，則確定出現第一預定行為。

12.根據權利要求10或11所述的方法，其特征在于，通過機器學習模型確定存在第一特征的視頻片段屬于第一預定行為的置信度，包括：

根據所述存在第一特征的視頻片段的類型，確定對應的機器學習模型；

將所述視頻片段輸入到所述對應的機器學習模型，得到所述視頻片段屬于第一預定行為的置信度。