[發(fā)明專利]機車乘務(wù)員的違章行為分析方法、裝置、設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110706198.5
• 申請日: 2021-06-24
• 公開（公告）號: CN113408445A
• 公開（公告）日: 2021-09-17
• 發(fā)明（設(shè)計）人: 劉濤;符子瑞;趙海紅;王立延;胡正揚;董浩;魏永濤;劉軍;趙淑鈺
• 申請（專利權(quán)）人: 深圳市長龍鐵路電子工程有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/20
• 代理公司: 深圳智匯遠見知識產(chǎn)權(quán)代理有限公司 44481
• 代理人: 劉潔;牛悅涵

1.一種機車乘務(wù)員的違章行為分析方法，其特征在于，包括：

獲取機車乘務(wù)員在機車運行過程中的監(jiān)控視頻；

檢測所述監(jiān)控視頻的各視頻幀圖像中的關(guān)鍵區(qū)域，所述關(guān)鍵區(qū)域包括人體關(guān)鍵區(qū)域和所述駕駛室關(guān)鍵區(qū)域；

根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員的違章行為，所述違章行為為駕駛中的禁止行為。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員的違章行為，包括：

根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員在各視頻幀圖像中的駕駛行為，所述駕駛行為包括指定違章行為或非指定違章行為，所述指定違章行為包括離崗行為、違規(guī)使用電子設(shè)備行為、偏頭閑聊行為或車門異常開啟行為；

判斷所述監(jiān)控視頻中是否存在連續(xù)N張視頻幀圖像中的駕駛行為均為所述指定違章行為，或在連續(xù)M張視頻幀圖像中是否出現(xiàn)不連續(xù)的P張視頻幀圖像中的駕駛行為均為所述指定違章行為；

若是，確定所述機車乘務(wù)員的違章行為為所述指定違章行為。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員在各視頻幀圖像中的駕駛行為，包括：

對于任意一幀視頻幀圖像，識別所述視頻幀圖像中的側(cè)窗區(qū)域、操作臺區(qū)域、車門區(qū)域和機車乘務(wù)員座位區(qū)域，所述側(cè)窗區(qū)域、所述操作臺區(qū)域、所述車門區(qū)域和所述機車乘務(wù)員座位區(qū)域?qū)儆谒鲴{駛室關(guān)鍵區(qū)域；

確定由所述側(cè)窗區(qū)域、所述操作臺區(qū)域、所述車門區(qū)域和所述機車乘務(wù)員座位區(qū)域構(gòu)成的指定駕駛區(qū)域，所述指定駕駛區(qū)域為所述機車駕駛室內(nèi)包含所述機車乘務(wù)員座位區(qū)域的預(yù)設(shè)區(qū)域；

當(dāng)確定所述機車乘務(wù)員不處于所述指定駕駛區(qū)域時，確定所述機車乘務(wù)員在所述視頻幀圖像中出現(xiàn)所述離崗行為。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員在各視頻幀圖像中的駕駛行為，包括：

對于任意一幀視頻幀圖像，判斷所述視頻幀圖像中是否具有指定電子設(shè)備；

若所述視頻幀圖像中具有所述指定電子設(shè)備，判斷所述指定電子設(shè)備是否位于所述機車乘務(wù)員的視野范圍內(nèi)；

若在所述視野范圍內(nèi)，確定所述機車乘務(wù)員在所述視頻幀圖像中出現(xiàn)所述違規(guī)使用電子設(shè)備行為。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，判斷所述指定電子設(shè)備是否位于所述機車乘務(wù)員的視野范圍內(nèi)，包括：

獲取所述視頻幀圖像中的臉區(qū)域、頭部區(qū)域、手區(qū)域和手臂區(qū)域；

確定由所述臉區(qū)域、所述頭部區(qū)域、所述手區(qū)域和所述手臂區(qū)域構(gòu)成的視野區(qū)域；

判斷所述指定電子設(shè)備是否處于所述視野區(qū)域；

當(dāng)處于所述視野區(qū)域，確定所述指定電子設(shè)備位于所述視野范圍內(nèi)。

6.根據(jù)權(quán)利要求2所述的方法，其特征在于，根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員在各視頻幀圖像中的駕駛行為，包括：

對于所述監(jiān)控視頻中的任意一張視頻幀圖像，確定所述視頻幀圖像中人臉區(qū)域與頭部區(qū)域的面積比、以及所述視頻幀圖像中的人臉區(qū)域的寬高比，所述人臉區(qū)域和所述頭部區(qū)域?qū)儆谒鋈梭w關(guān)鍵區(qū)域；

當(dāng)所述面積比大于面積閾值、或所述寬高比大于寬高比閾值時，確定所述機車乘務(wù)員在所述視頻幀圖像中出現(xiàn)所述偏頭閑聊行為。

7.根據(jù)權(quán)利要求2所述的方法，其特征在于，根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員在各視頻幀圖像中的駕駛行為，包括：

判斷所述監(jiān)控視頻中是否存在車門為開啟狀態(tài)的視頻幀圖像；

若是，確定所述機車乘務(wù)員在所述視頻幀圖像中出現(xiàn)所述異常開啟車門行為。

8.一種機車乘務(wù)員的違章行為分析裝置，其特征在于，包括：

獲取單元，用于獲取機車乘務(wù)員在機車運行過程中的監(jiān)控視頻；

檢測單元，用于檢測所述監(jiān)控視頻的各視頻幀圖像中的關(guān)鍵區(qū)域，所述關(guān)鍵區(qū)域包括人體關(guān)鍵區(qū)域和所述駕駛室關(guān)鍵區(qū)域；

確定單元，用于根據(jù)所述關(guān)鍵區(qū)域確定所述機車乘務(wù)員的違章行為，所述違章行為為駕駛中的禁止行為。