[發明專利]一種基于實景數據的視頻監控智能追蹤方法及其系統

在審

• 申請號: 202310076813.8
• 申請日: 2023-01-13
• 公開（公告）號: CN116091547A
• 公開（公告）日: 2023-05-09
• 發明（設計）人: 胡榮強;尹賓賓;張建偉;齊曉晗;王雅新
• 申請（專利權）人: 天津飛眼無人機科技有限公司
• 主分類號: G06T7/246
• 分類號: G06T7/246;G06V20/17;G06V20/40;G06T17/05;G06T15/00;G06V10/82;G06N3/0464;G06N3/08;H04N7/18;G08G1/017
• 代理公司: 北京沁優知識產權代理有限公司 11684
• 代理人: 郭娜

本發明一種基于實景數據的視頻監控智能追蹤方法及其系統,本方案基于實景三維的空間視頻監控追蹤有效的提高了大場景視頻監控索引效率，結合AI智能識別算法實時監控追蹤對象，實現了在圖像、空間、時間不同維度上的對象鎖定，可廣泛應用在交通、公安、安防、應急、國防等領域。

技術領域

本發明涉及無人機監控跟蹤設計技術領域，尤其是一種基于實景數據的視頻監控智能追蹤方法及其系統。

背景技術

在傳統的視頻監控系統中，監管人員需要同時觀看多個分鏡頭畫面，并且很難將零散的分鏡頭視頻與其實際地理位置相對應，無法對大場景進行全局實時監測，也無法對歷史事件進行快速回溯查找。

發明內容

有鑒于此，本發明旨在提出一種基于實景數據的視頻監控智能追蹤方法及其系統，從而解決現有技術的不足，解決如何利用實景三維地圖可視化技術，結合視頻監控技術實現視頻監控在三維場景中的實時投影，并有效的利用AI算法快速定位追蹤有效目標的問題。

為實現上述目的，本發明提出的其中一個技術方案是：一種基于實景數據的視頻監控智能追蹤方法，該方法包括：

S1、構建實景三維地圖：通過無人機傾斜攝影測量技術還原視頻監控區域實景三維地圖；

S2、依據視頻監控點位信息進行實時視頻流在S1構建的三維場景中的立體投影；

S3、利用三維渲染引擎獲取S2中的立體投影的地表渲染視頻幀；

S4、利用yolo3?AI算法捕捉S3中的視頻幀中的追蹤對象；

S5、標定追蹤目標；

S6、根據目標在地表渲染視頻幀的相對坐標計算出絕對地理坐標；

S7、根據絕對地理坐標在三維地圖生成的目標路徑，實現目標追蹤。

進一步的，步驟S1中，包括：

S101、無人機航攝數據獲取：對無人機及傾斜攝影航攝相機進行選型，以1：500比例尺建模要求進行航線設計，對測區傾斜攝影影像數據進行采集；

S102、傾斜攝影數據預處理：對傾斜攝影影像數據進行分組整理，去掉無效影像和POS點位信息；

S103、三維模型生成：預處理數據進入實景三維建模軟件進行生產，生成出三維模型成果數據。

進一步的，步驟S101中，航空影像的地面分辨率要優于0.05米，用于制作實景三維模型成果，其航高與地面分辨率關系式為：

其中h為相對飛行高度；f為鏡頭焦距；a為像元尺寸；GSD為地面分辨率。

進一步的，步驟S3中，還包括：

S301、視頻流獲取：根據視頻監控設備類型及網絡地址，獲取RTSP視頻流地址及監控設備鏡頭詳細參數；

S302、依據監控設備位置信息和監控范圍特征點信息轉換監控范圍特征點信息到空間坐標；

S303、依據監控設備和特征點空間坐標信息在實景三維中繪制視頻監控范圍面，Polygon貼圖設置為RTSP視頻流；

S304、調用三維引擎底層OnFrame渲染幀監聽方法，獲取當前幀圖像。

進一步的，步驟S4中，包括有：

S401、數據預處理：生成訓練測試文件，存儲圖片路徑、bbox和類別；

通過讀取訓練測試文件，對圖片進行增強處理；