[發明專利]行為識別方法、裝置、介質及電子設備

在審

• 申請號: 202011467345.X
• 申請日: 2020-12-14
• 公開（公告）號: CN112446352A
• 公開（公告）日: 2021-03-05
• 發明（設計）人: 張運輝;張致愷;楊聰
• 申請（專利權）人: 深圳地平線機器人科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/32;G06K9/62;G06N3/04
• 代理公司: 北京思源智匯知識產權代理有限公司 11657
• 代理人: 毛麗琴

公開了一種行為識別方法、裝置、介質及設備，其中的方法包括：從設置于移動設備中的攝像裝置采集獲得的多個視頻幀中，獲取包含有目標對象的目標部位的圖像塊序列；對所述圖像塊序列進行基于第一預設行為的特征向量提取處理，獲得所述圖像塊序列對應的第一特征向量；根據所述第一特征向量，確定所述目標對象的行為所屬的行為類型；若所述目標對象的行為所屬的行為類型符合第一行為類型，則根據對所述圖像塊序列進行第二預設行為的行為識別處理的結果，確定所述目標對象的行為。本公開提供的技術方案可以實現對目標對象的行為的級聯識別，從而有利于提高行為識別的準確性，進而有利于提高移動設備的行駛安全。

技術領域

本公開涉及計算機視覺技術，尤其是涉及一種行為識別方法、行為識別裝置、存儲介質以及電子設備。

背景技術

在駕駛領域中，由于移動設備的駕駛員以及乘客等人員的某些行為，會對移動設備的安全行駛產生影響，因此，對位于移動設備內的目標對象的行為進行識別，并在識別出的目標對象的行為為不利于移動設備的安全行駛的行為時，及時采取措施，以盡可能的降低目標對象的行為對移動設備的安全行駛的影響，是非常必要的。

發明內容

為了解決上述技術問題，提出了本公開。本公開的實施例提供了一種行為識別方法、裝置、存儲介質以及電子設備。

根據本公開實施例的一個方面，提供了一種行為識別方法，包括：從設置于移動設備中的攝像裝置采集獲得的多個視頻幀中，獲取包含有目標對象的目標部位的圖像塊序列；對所述圖像塊序列進行基于第一預設行為的特征向量提取處理，獲得所述圖像塊序列對應的第一特征向量；根據所述第一特征向量，確定所述目標對象的行為所屬的行為類型；若所述目標對象的行為所屬的行為類型符合第一行為類型，則根據對所述圖像塊序列進行第二預設行為的行為識別處理的結果，確定所述目標對象的行為。

根據本公開實施例的另一個方面，提供了一種行為識別裝置，包括：獲取序列模塊，用于從設置于移動設備中的攝像裝置采集獲得的多個視頻幀中，獲取包含有目標對象的目標部位的圖像塊序列；獲取特征向量模塊，用于對所述獲取序列模塊獲取到的圖像塊序列進行基于第一預設行為的特征向量提取處理，獲得所述圖像塊序列對應的第一特征向量；確定行為類型模塊，用于根據所述獲取特征向量模塊獲得的第一特征向量，確定所述目標對象的行為所屬的行為類型；級聯識別模塊，用于若所述確定行為類型模塊確定出的所述目標對象的行為所屬的行為類型符合第一行為類型，則根據對所述圖像塊序列進行第二預設行為的行為識別處理的結果，確定所述目標對象的行為。

根據本公開實施例的又一個方面，提供了一種計算機可讀存儲介質，所述存儲介質存儲有計算機程序，所述計算機程序用于實現上述方法。

根據本公開實施例的再一個方面，提供了一種電子設備，包括：處理器；用于存儲所述處理器可執行指令的存儲器；所述處理器，用于從所述存儲器中讀取所述可執行指令，并執行所述指令以實現上述方法。

基于本公開上述實施例提供的一種行為識別方法和裝置，通過從設置于移動設備中的攝像裝置采集的視頻幀中，提取移動設備中的駕駛員或者乘客等目標對象的目標部位的圖像塊，并從圖像塊序列中獲得第一特征向量，使本公開可以基于該第一特征向量獲得目標對象的行為所屬的行為類型，由于在目標對象的行為所屬的行為類型符合第一行為類型(如疑似行為類型)時，本公開可以聯合針對圖像塊序列執行的第二預設行為所對應的行為識別處理的結果，確定目標對象的行為，因此，本公開實現了對目標對象的行為的級聯識別，從而有利于避免行為識別所使用的閾值設置過高或者過低對行為識別準確性的影響，由此可知，本公開提供的技術方案有利于提高行為識別的準確性，而且通過針對識別出的目標對象的行為(如危險駕駛行為或者影響駕駛員駕駛的危害駕駛行為等)，采取相應的語音提示、燈光提示或者振動提示等措施，有利于提高移動設備的行駛安全。

下面通過附圖和實施例，對本公開的技術方案做進一步的詳細描述。

附圖說明