[發明專利]一種VPU平臺下的多路攝像頭數據實時處理的方法

有效

• 申請號: 202010773916.6
• 申請日: 2020-08-04
• 公開（公告）號: CN111787185B
• 公開（公告）日: 2023-09-05
• 發明（設計）人: 孟瑩
• 申請（專利權）人: 成都云圖睿視科技有限公司
• 主分類號: H04N5/06
• 分類號: H04N5/06;H04N19/44;G06F9/52;G06F9/54
• 代理公司: 成都貞元會專知識產權代理有限公司 51390
• 代理人: 王大剛

1.一種VPU平臺下的多路攝像頭數據實時處理的方法，其特征在于：包括以下步驟：

S1、通過一個VPU平臺實現單路攝像頭數據的實時獲取和實時處理，首先對每路攝像頭數據建立三個線程，所述三個線程包括第一線程、第二線程和第三線程，所述第一線程為視頻獲取線程，所述第一線程用來對視頻流數據進行解碼，并結合適當的跳幀來實時獲取數據，所述第二線程用來監聽視頻獲取線程是否正常工作，所述第三線程用來處理視頻流數據；

所述第一線程主要通過開源包實時解碼視頻流數據，并檢查第三線程是否處理結束，當視頻數據處理完成，即將當前圖片送給第三線程進行處理，加上跳幀的機制，使第三線程可以實時拿到當前時刻的攝像頭數據，該第一線程設置保護機制，解碼拿到圖片后判斷獲取圖片是否非空，如果為空，就重新打開視頻流，通過上述機制保證視頻獲取線程正常工作；

所述第二線程為監聽線程，所述第二線程每隔一段時間判斷活動幀數和心跳幀數是否相等，如果相等，則表明在此次間隔時間內，視頻獲取線程沒有工作，則此時監聽線程應該重啟視頻獲取線程，否則則將心跳幀數賦值為活動幀數，通過這種監聽的機制進一步確保視頻流獲取線程正常工作；

S2、通過一個或多個VPU實現多路攝像頭數據的并發處理來進一步擴大攝像頭視頻流的處理路數，多路攝像頭數據之間相互獨立，通過多線程并行處理視頻流的方式，即多個處理線程同時請求VPU，根據不同的VPU型號，VPU可以串行或并行處理多路視頻流數據，實現同時處理多路攝像頭數據；

S3、基于多線程共享隊列的多路視頻流同步實時處理來避免多路攝像頭視頻流數據同步處理中某幾個線程持續搶占鎖的情況的發生，每個視頻獲取線程在解碼完當前攝像頭的數據后都去檢查共享隊列中該路圖片是否被處理，當檢測到被處理后，即去搶占控制共享隊列的互斥鎖，將當前視頻獲取線程所獲得的最新圖片壓進共享隊列，再釋放鎖，同時限制共享隊列長度，保證不會過度占用內存；每一個視頻獲取線程都按這個邏輯操作，可以保證每一路視頻流數據都得到處理，不會出現某一路視頻數據持續搶斷的情況；此時獲得執行鎖的視頻處理線程去拿共享隊列的互斥鎖，拿到鎖后獲取共享隊列頭部的數據，并從共享隊列中將該數據刪除，再釋放鎖，每一路視頻處理線程都按這個邏輯操作，可以避免單路攝像頭數據流被持續處理的情況。

2.根據權利要求1所述的一種VPU平臺下的多路攝像頭數據實時處理的方法，其特征在于：所述第三線程通過調用VPU處理視頻圖片中大算力要求的任務，從而加快視頻數據的處理速度，當處理結束后，再將數據轉發至Web端或云端。

3.根據權利要求2所述的一種VPU平臺下的多路攝像頭數據實時處理的方法，其特征在于：所述步驟S2中通過增加VPU的數目，進而進一步擴大攝像頭視頻流的路數，或在在同等視頻流路數下，進一步減少每一路視頻的處理時間，進而達到實時處理視頻流數據。