[發明專利]一種公交的行駛管控方法、裝置、計算機設備和存儲介質

在審

• 申請號: 202111221665.1
• 申請日: 2021-10-20
• 公開（公告）號: CN113947806A
• 公開（公告）日: 2022-01-18
• 發明（設計）人: 王培森;張建軍;黃梓斌;錢劍港
• 申請（專利權）人: 廣州通達汽車電氣股份有限公司;廣州通巴達電氣科技有限公司
• 主分類號: G06V40/18
• 分類號: G06V40/18;G06V20/59;G06V10/75;G06V10/82;G06V10/774;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 岳曉萍

本發明實施例提供了一種公交的行駛管控方法、裝置、計算機設備和存儲介質，該方法包括：當公交車沿指定的路線行駛時，檢測乘客在駕駛位相鄰的區域中停留的時間，若時間超過預設的第一閾值，則對乘客采集視頻數據、第一語音數據，對位于駕駛位的駕駛員采集第二語音數據，在視頻數據和/或第一語音數據中檢測乘客表達的情感，若情感為負向的情感，則在視頻數據檢測乘客的視線方向，對第一語音數據與第二語音數據進行自然語言上的匹配，若視線方向指向駕駛員、第一語音數據與第二語音數據匹配成功，則對乘客執行警報操作、對公交車執行行駛管控操作，以乘客的視線方向、乘客與駕駛員的對話作為依據，可以提高檢測乘客與駕駛員是否產生矛盾的精確度。

技術領域

本發明實施例涉及公共交通的技術領域，尤其涉及一種公交的行駛管控方法、裝置、計算機設備和存儲介質。

背景技術

公交車是用戶出行的公共交通工具之一，公交車由特定的駕駛員駕駛，而公交車上乘客來往較為頻繁，在停站、上車、下車、搭乘貨物或寵物等方面，容易與駕駛員產生矛盾、沖突，這會嚴重影響公交車的行駛安全。

為此，公交車內會進行視頻監控，檢測乘客是否對駕駛員產生具有攻擊性的行為，從而判斷乘客與駕駛員是否產生矛盾，但是，在公交車的環境中，乘客較為密集，通過視頻檢測攻擊性行為的精確度較低，導致判斷乘客與駕駛員是否產生矛盾的精確度較低，因此，通常會將視頻進一步進行人工審核，導致人工審核的成本較高。

發明內容

本發明實施例提出了一種公交的行駛管控方法、裝置、計算機設備和存儲介質，以解決如何提高檢測乘客與駕駛員是否產生矛盾的精確度，從而降低人工審核成本的問題。

第一方面，本發明實施例提供了一種公交的行駛管控方法，包括：

當公交車沿指定的路線行駛時，檢測乘客在駕駛位相鄰的區域中停留的時間；

若所述時間超過預設的第一閾值，則對所述乘客采集視頻數據、第一語音數據；

對位于所述駕駛位的駕駛員采集第二語音數據；

在所述視頻數據和/或所述第一語音數據中檢測所述乘客表達的情感；

若所述情感為負向的情感，則在所述視頻數據檢測所述乘客的視線方向；

對所述第一語音數據與所述第二語音數據進行自然語言上的匹配；

若所述視線方向指向所述駕駛員、所述第一語音數據與所述第二語音數據匹配成功，則對所述乘客執行警報操作、對所述公交車執行行駛管控操作。

可選地，所述視頻數據具有多幀圖像數據，所述在所述視頻數據檢測所述乘客的視線方向，包括：

在所述圖像數據中提取所述乘客的眼球所在的區域圖像數據；

在所述區域圖像數據中提取表示虹膜的虹膜圖像數據、表示眼球的眼球圖像數據；

根據所述虹膜圖像數據與所述眼球圖像數據計算所述乘客的虹膜相對于眼球的姿態；

將所述姿態轉換為所述乘客的視線方向。

可選地，所述在所述區域圖像數據中提取表示虹膜的虹膜圖像數據、表示眼球的眼球圖像數據，包括：

在第一編碼器中對所述區域圖像數據進行編碼，獲得第一特征圖像數據；

在第二編碼器中對所述第一特征圖像數據進行編碼，獲得第二特征圖像數據；

在第一解碼器中對所述第二特征圖像數據進行解碼，獲得第三特征圖像數據；

在第二解碼器中對所述第三特征圖像數據與所述第一特征圖像數據進行解碼，獲得第四特征圖像數據；