[發明專利]廢鋼貨車位置及狀態識別方法、系統、設備及介質

有效

• 申請號: 202011210829.6
• 申請日: 2020-11-03
• 公開（公告）號: CN112348894B
• 公開（公告）日: 2022-07-29
• 發明（設計）人: 龐殊楊;袁鈺博;劉斌;郭強;田君儀;周文靖;李邈;龔強;賈鴻盛;毛尚偉
• 申請（專利權）人: 中冶賽迪重慶信息技術有限公司
• 主分類號: G06T7/73
• 分類號: G06T7/73;G06V10/25;G06V10/82;G06N3/04
• 代理公司: 上海光華專利事務所(普通合伙) 31219
• 代理人: 李鐵

1.一種廢鋼貨車位置及狀態識別方法，其特征在于，包括：

采集廢鋼料廠中當前堆卸廢鋼物料區域下包含廢鋼貨車的圖像；

預處理所述圖像生成數據集，利用卷積神經網絡訓練所述數據集得到檢測廢鋼貨車位置的檢測模型；

調用所述檢測模型識別待測圖像內每輛廢鋼貨車的位置信息；

對比識別的廢鋼貨車的位置信息與感興趣區域的位置信息，根據所述感興趣區域內廢鋼貨車的外觀特征確定所述廢鋼貨車的類型，判斷當前所述廢鋼貨車的狀態；其中，所述感興趣區域位置信息的格式與內容為：[RoI_xmin，ROI_ymin，ROI_xmax，ROI_ymax]

其中，ROI_xmin、ROI_ymin分別為感興趣區域在圖像中的左上角x、y坐標，ROI_xmax、ROI_ymax分別為感興趣區域在圖像中的右下角x、y坐標；

將識別的廢鋼貨車位置信息與感興趣區域位置信息進行對比，如果所述位置信息滿足Truck_xmin＞ROI_xmin，Truck_ymin＞ROI_ymin，Truck_xmax＜ROI_xmax，Truck_ymax＜ROI_ymax，則判定所述廢鋼貨車在所述感興趣區域內，根據所述廢鋼貨車的外觀特征分類確定其類型，當所述外觀特征中形狀和外觀統一時，則所述廢鋼貨車為廢鋼堆料貨車Truck_D；當所述外觀特征與廢鋼堆料貨車形狀和外觀不同且種類多樣時，則所述廢鋼貨車為廢鋼卸料貨車。

2.根據權利要求1所述的廢鋼貨車位置及狀態識別方法，其特征在于，所述采集廢鋼料廠中當前堆卸廢鋼物料區域下包含廢鋼貨車的圖像的步驟之前，還包括：利用位于所述廢鋼料廠橫梁上的攝像裝置采集圖像，將所述圖像內堆卸廢鋼物料區域設置為感興趣區域。

3.根據權利要求1所述的廢鋼貨車位置及狀態識別方法，其特征在于，所述預處理所述圖像生成數據集，所述利用卷積神經網絡訓練所述數據集得到檢測廢鋼貨車位置的檢測模型的步驟包括：

采集堆卸廢鋼物料區域內包含廢鋼貨車的圖像，標注所述圖像內廢鋼貨車的位置信息形成數據集；

將所述數據集內圖像輸入基于深度學習的卷積神經網絡進行訓練，建立用于檢測廢鋼貨車位置的檢測模型；其中，所述卷積神經網絡包括SSD、yolo或faster-rcnn中的任意一種。

4.根據權利要求1、2或3所述的廢鋼貨車位置及狀態識別方法，其特征在于，所述調用所述檢測模型識別待測圖像內每輛廢鋼貨車的位置信息的步驟，包括：調用所述檢測模型識別待測圖像中每輛廢鋼貨車的位置信息，該位置信息的內容與格式為：

式中，每一行分別對應一個廢鋼貨車矩形目標框；Truck1_xmin、Truck1_ymin分別為第一個廢鋼貨車識別框左上角點的x、y坐標；Truck1_xmax、Truck1_ymax分別為第一個廢鋼貨車識別框右下角點的x、y坐標；TruckN為第N個廢鋼貨車識別框。

5.根據權利要求1所述的廢鋼貨車位置及狀態識別方法，其特征在于，所述對比識別的廢鋼貨車的位置信息與感興趣區域的位置信息，根據所述感興趣區域內廢鋼貨車的外觀特征確定所述廢鋼貨車的類型，判斷當前所述廢鋼貨車的狀態的步驟，包括：

將識別的廢鋼貨車位置信息與感興趣區域位置信息進行對比，根據感興趣區域內的廢鋼貨車的外觀特征分類；所述外觀特征中形狀和外觀統一的廢鋼貨車為廢鋼堆料貨車；與所述廢鋼堆料貨車形狀和外觀不同且種類多樣的廢鋼貨車為廢鋼卸料貨車；

根據感興趣區域內的廢鋼貨車數量和種類，判斷當前的廢鋼貨車狀態。