[發明專利]貨物狀態監測方法、裝置、終端設備及存儲介質

在審

• 申請號: 202111453668.8
• 申請日: 2021-12-01
• 公開（公告）號: CN116228621A
• 公開（公告）日: 2023-06-06
• 發明（設計）人: 連自鋒
• 申請（專利權）人: 順豐科技有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06Q10/083;G06V10/44
• 代理公司: 深圳紫藤知識產權代理有限公司 44570
• 代理人: 陳楚芳

本申請提供一種貨物狀態監測方法、裝置、終端設備及存儲介質，該方法包括：獲取目標貨物在運輸場景中的場景圖像特征；獲取目標貨物在運輸場景中的多個注意力機制信息；根據場景圖像特征和多個注意力機制信息的融合圖像信息，監測目標貨物的運輸狀態。本申請提供的貨物狀態監測方法，能夠通過場景圖像特征分析出目標物體的運動模式，而非分析目標物體運動軌跡是否與設定的路線匹配。在運輸軌跡發生變化后，一樣能監測出目標貨物的運輸狀態。在保證了監測準確性的情況下，提高了監測的靈活性。此外，通過引入場景的權重，可以篩選掉一些無用的場景信息，減少了模型對不必要場景信息的分析工作，進而減少模型的運行成本。

技術領域

本申請涉及圖像處理領域，具體涉及了一種貨物狀態監測方法、裝置、終端設備及存儲介質。

背景技術

在快遞和物流行業中，需要對中轉場的裝卸貨事件進行監控，以便精準的獲得每個貨箱的裝卸貨開始時間與結束時間，從而統計物流各環節耗時，提高運轉效率。對于計算機來說，判斷一個視頻序列中是否包含某個事件，仍然是一件比較困難的事情。在現有技術中，通常判斷快遞移動的軌跡是否與特定的運動路線匹配，從而判斷其是否屬于某個事件狀態。這種方法要求攝像頭固定，運動模式的偏差不能過大。一旦運輸場景的變化，導致軌跡路線發送變化，分析的效果便會下降，因此檢測的靈活性與準確性均較低。同時，在分析快遞運動路線時，也會分析出整個運輸場景中其他的物體，因此也存在分析目標過多的情況。

發明內容

本申請提供一種貨物狀態監測方法，通過分析貨物的運動模式，進而監測貨物的運輸狀態。

第一方面，本申請提供一種貨物狀態監測方法，所述方法包括：

獲取目標貨物在運輸場景中的場景圖像特征；

獲取所述目標貨物在運輸場景中的多個注意力機制信息；

根據所述場景圖像特征和所述多個注意力機制信息的融合圖像信息，監測所述目標貨物的運輸狀態。

在本申請一些實施例中，所述獲取目標貨物在運輸場景中的場景圖像特征，包括：

獲取所述目標貨物的當前運輸圖像；

獲取所述當前運輸圖像的光流信息，所述光流信息包括水平通道光流信息和垂直通道光流信息；

將所述當前運輸圖像、所述水平通道光流信息和所述垂直通道光流信息融合，得到融合圖像；

根據預設的場景特征提取模型，提取所述融合圖像中的場景圖像特征。

在本申請一些實施例中，所述獲取所述目標貨物在運輸場景中的多個注意力機制信息，包括：

獲取所述目標貨物的當前運輸圖像；

分割所述當前運輸圖像中的各個物體，得到物體分割圖像；

計算所述物體分割圖像中各個位置的注意力掩碼，一個圖像位置對應一個注意力掩碼。

在本申請一些實施例中，所述根據所述場景圖像特征和所述多個注意力機制信息的融合圖像信息，監測所述目標貨物的運輸狀態，包括：

根據所述融合圖像信息，獲取有效場景圖像特征；

通過預設的貨物監測模型和所述有效場景圖像特征，監測所述目標貨物的運輸狀態。

在本申請一些實施例中，所述根據所述融合圖像信息，獲取有效場景圖像特征，包括：

分別以融合圖像信息中多個注意力掩碼的一個注意力掩碼為目標注意力掩碼，比較所述目標注意力掩碼與預設的有效掩碼閾值的大小；

若所述目標注意力掩碼大于等于所述有效掩碼閾值，確定所述目標注意力掩碼對應的場景圖像特征有效；