[發明專利]機車乘務員的違章行為分析方法、裝置、設備及存儲介質

在審

• 申請號: 202110706198.5
• 申請日: 2021-06-24
• 公開（公告）號: CN113408445A
• 公開（公告）日: 2021-09-17
• 發明（設計）人: 劉濤;符子瑞;趙海紅;王立延;胡正揚;董浩;魏永濤;劉軍;趙淑鈺
• 申請（專利權）人: 深圳市長龍鐵路電子工程有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/20
• 代理公司: 深圳智匯遠見知識產權代理有限公司 44481
• 代理人: 劉潔;牛悅涵

本申請涉及一種機車乘務員的違章行為分析方法、裝置、設備及存儲介質，該方法包括獲取機車乘務員在駕駛室的監控視頻；檢測監控視頻的各視頻幀圖像中的關鍵區域，關鍵區域包括人體關鍵區域和駕駛室關鍵區域；根據關鍵區域確定機車乘務員的違章行為，利用現有機車司機室視頻監控(低質量)直接采集現場圖像，不需要改造機車司機室、無需增加新的圖像采集裝置，智能高效分析影響行車安全的乘務員離崗行為、違規使用電子設備行為、偏頭閑聊行為、以及異常開啟車門行為等違章行為，減少人員審核視頻工作量，提高工作效率。

技術領域

本申請涉及軌道交通、機車駕駛領域，尤其涉及一種機車乘務員的違章行為分析方法、裝置、設備及存儲介質。

背景技術

目前國內對于鐵路機車乘務員的行為分析主要依靠人工抽查與審核機車監控視頻，人工抽查審核，由于工作量大，不能做到視頻、人員全覆蓋審核分析，存在漏查漏報以及效率低的問題。

現有分析方式可以分為兩類：一是監控車輛狀態判斷乘務員狀態，通過傳感器監控記錄行車狀態，監控行車狀態，通過比較與分析異常行車狀態，間接判斷乘務員行為。二是通過視頻監控乘務員，人工審核，進而判斷乘務員行為。

上述的兩類分析方法也存在缺陷：對于第一類方法是間接監控，不能完全真實反映乘務員的行為，并且分析不及時；對于第二類方法，需要分析人員人工審核，工作量大。其行為分析質量受限于人的主觀責任心及業務能力影響，容易造成漏查漏報。

發明內容

本申請提供了一種機車乘務員的違章行為分析方法、裝置、設備及存儲介質，利用現有機車司機室監控視頻(低質量)直接采集現場圖像，不需要改造司機室、無需增加新采集裝置，智能高效分析影響行車安全的乘務員離崗行為、違規使用電子設備行為、偏頭閑聊行為、以及異常開啟車門行為等違章行為，減少人員審核視頻工作量，提高工作效率。

第一方面.提供一種機車乘務員的違章行為分析方法，包括：

獲取機車乘務員在機車運行過程中的監控視頻；

檢測所述監控視頻的各視頻幀圖像中的關鍵區域，所述關鍵區域包括人體關鍵區域和所述駕駛室關鍵區域；

根據所述關鍵區域確定所述機車乘務員的違章行為，所述違章行為為駕駛中的禁止行為。

可選地，根據所述關鍵區域確定所述機車乘務員的違章行為，包括：

根據所述關鍵區域確定所述機車乘務員在各視頻幀圖像中的駕駛行為，所述駕駛行為包括指定違章行為或非指定違章行為，所述指定違章行為包括離崗行為、違規使用電子設備行為、偏頭閑聊行為或車門異常開啟行為；

判斷所述監控視頻中是否存在連續N張視頻幀圖像中的駕駛行為均為所述指定違章行為，或在連續M張視頻幀圖像中是否出現不連續的P張視頻幀圖像中的駕駛行為均為所述指定違章行為；

若是，確定所述機車乘務員的違章行為為所述指定違章行為。

可選地，根據所述關鍵區域確定所述機車乘務員在各視頻幀圖像中的駕駛行為，包括：

對于任意一幀視頻幀圖像，識別所述視頻幀圖像中的側窗區域、操作臺區域、車門區域和機車乘務員座位區域，所述側窗區域、所述操作臺區域、所述車門區域和所述機車乘務員座位區域屬于所述駕駛室關鍵區域；

確定由所述側窗區域、所述操作臺區域、所述車門區域和所述機車乘務員座位區域構成的指定駕駛區域，所述指定駕駛區域為所述機車駕駛室內包含所述機車乘務員座位區域的預設區域；

當確定所述機車乘務員不處于所述指定駕駛區域時，確定所述機車乘務員在所述視頻幀圖像中出現所述離崗行為。

可選地，根據所述關鍵區域確定所述機車乘務員在各視頻幀圖像中的駕駛行為，包括：