[發明專利]人體行為識別方法、裝置、設備、存儲介質以及程序產品

有效

• 申請號: 202110467154.1
• 申請日: 2021-04-28
• 公開（公告）號: CN113139483B
• 公開（公告）日: 2023-09-29
• 發明（設計）人: 胡韜;蘇翔博
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06V40/20
• 分類號: G06V40/20;G06V20/40;G06V10/25;G06V10/82;G06N3/0464
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

本公開提供了一種人體行為識別方法、裝置、設備、存儲介質以及程序產品，涉及人工智能領域，具體為計算機視覺和深度學習技術，可應用于智慧城市場景下。該方法的一具體實施方式包括：檢測目標圖像中的目標人體框和目標物體框；基于目標人體框和目標物體框進行關系建模，生成圖模型，其中，圖模型中的節點是目標人體框的特征或目標物體框的特征，圖模型中的邊是目標人體框與目標物體框之間的圖像關系表示；在圖模型中的節點之間進行特征傳播，更新圖模型；對圖模型中的人體與物體的節點對進行預測，得到目標圖像中的人體行為。該實施方式提升了人體行為的識別準確度。

技術領域

本公開涉及人工智能領域，具體為計算機視覺和深度學習技術，可應用于智慧城市場景下。

背景技術

隨著人工智能相關技術的發展與應用，越來越多的領域顯露出對智能化、自動化技術的強烈需求。在計算機視覺領域中，人體行為分析的應用十分廣泛。例如，人體行為分析可以應用在監控安防領域。

現有的人體行為分析技術主要分成兩大類：第一類是基于視頻流的算法，該類算法將視頻流送進模型后，利用3D卷積對視頻分類，從而達到對人體行為分類的效果；另一類是基于視頻流和光流的算法，該類算法采用雙流結構，同時提取視頻流信息和光流信息，利用視頻流信息獲取圖像語言信息，同時利用光流信息獲取人體運動信息，從而達到對人體行為分析的目的。

發明內容

本公開實施例提出了一種人體行為識別方法、裝置、設備、存儲介質以及程序產品。

第一方面，本公開實施例提出了一種人體行為識別方法，包括：檢測目標圖像中的目標人體框和目標物體框；基于目標人體框和目標物體框進行關系建模，生成圖模型，其中，圖模型中的節點是目標人體框的特征或目標物體框的特征，圖模型中的邊是目標人體框與目標物體框之間的圖像關系表示；在圖模型中的節點之間進行特征傳播，更新圖模型；對圖模型中的人體與物體的節點對進行預測，得到目標圖像中的人體行為。

第二方面，本公開實施例提出了一種人體行為識別裝置，包括：檢測模塊，被配置成檢測目標圖像中的目標人體框和目標物體框；建模模塊，被配置成基于目標人體框和目標物體框進行關系建模，生成圖模型，其中，圖模型中的節點是目標人體框的特征或目標物體框的特征，圖模型中的邊是目標人體框與目標物體框之間的圖像關系表示；傳播模塊，被配置成在圖模型中的節點之間進行特征傳播，更新圖模型；預測模塊，被配置成對圖模型中的人體與物體的節點對進行預測，得到目標圖像中的人體行為。

第三方面，本公開實施例提出了一種電子設備，包括：至少一個處理器；以及與至少一個處理器通信連接的存儲器；其中，存儲器存儲有可被至少一個處理器執行的指令，指令被至少一個處理器執行，以使至少一個處理器能夠執行如第一方面中任一實現方式描述的方法。

第四方面，本公開實施例提出了一種存儲有計算機指令的非瞬時計算機可讀存儲介質，計算機指令用于使計算機執行如第一方面中任一實現方式描述的方法。

第五方面，本公開實施例提出了一種計算機程序產品，包括計算機程序，計算機程序在被處理器執行時實現如第一方面中任一實現方式描述的方法。

本公開實施例提供了基于人體與物體交互的人體行為分析方法，不僅從圖像中挖掘人體的信息，還從圖像中挖掘物體的信息，從而充分挖掘圖像信息。并且，通過在人體節點與物體節點之間進行特征傳播，將圖像中的人體與物體相關聯。結合關聯的人體和物體進行人體行為識別，提升了人體行為的識別準確度。當應用在監控領域中的一些實際應用場景中時，可以得到更準確的人體行為識別結果。

應當理解，本部分所描述的內容并非旨在標識本公開的實施例的關鍵或重要特征，也不用于限制本公開的范圍。本公開的其它特征將通過以下的說明書而變得容易理解。

附圖說明

通過閱讀參照以下附圖所作的對非限制性實施例所作的詳細描述，本公開的其它特征、目的和優點將會變得更明顯。附圖用于更好地理解本方案，不構成對本公開的限定。其中：