[發明專利]一種面向建筑數字孿生的視頻檢測方法及系統

有效

• 申請號: 202210217839.5
• 申請日: 2022-03-08
• 公開（公告）號: CN114332741B
• 公開（公告）日: 2022-05-10
• 發明（設計）人: 王佳;周小平;馮馳原;鄭洋;傅文峰;陳丹燕
• 申請（專利權）人: 盈嘉互聯（北京）科技有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/25;G06V10/26;G06N3/04
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 張文娥

本申請提供了一種面向建筑數字孿生的視頻檢測方法及系統，該方法包括：對連續視頻圖像幀中的每一幀待檢測圖像進行實體對象檢測，確定每一幀待檢測圖像中包括的實體對象類別；當檢測到任意一幀待檢測圖像中出現第一實體對象時，則從該幀待檢測圖像中，獲取第一實體對象所在的圖像連通區域；將該圖像連通區域輸入直線檢測模型中，得到該圖像連通區域的直線檢測結果；從直線檢測結果中，確定平行于第一直角邊方向的第一平行線和平行于第二直角邊方向的第二平行線；根據第一平行線與第二平行線在該圖像連通區域內形成的交點，確定第一實體對象的圖像位置。這樣，本申請在對具備拼接結構的實體對象進行視頻檢測時，可以提高實體位置定位精度。

技術領域

本申請涉及建筑數字孿生技術領域，具體而言，涉及一種面向建筑數字孿生的視頻檢測方法及系統。

背景技術

數字孿生是指充分利用物理模型、傳感器更新、運行歷史等數據，集成多學科、多物理量、多尺度、多概率的仿真過程，在虛擬空間中完成映射，從而反映相對應的實體裝備的全生命周期過程。其中，建筑數字孿生是指在工程建設的應用場景中，為了更加直觀清晰的展示目標實體建筑的空間布局結構，工程建設人員通常會在目標實體建筑建成之后，構建一個能夠反映目標實體建筑的物理與功能特性的建筑信息模型，將構建的建筑信息模型作為目標實體建筑的數字孿生模型，以通過數字孿生模型來便捷性的管理目標實體建筑的過程。

基于此，在構建數字孿生模型/更新數字孿生模型時，常需要通過視頻檢測的方法，從實體建筑場景內連續拍攝到的圖像中，確定每一個實體對象的類別以及各實體對象在圖像中所在的實體位置，以通過相機內外參完成像素坐標系與虛擬空間世界坐標系（數字孿生模型內的位置坐標符合虛擬空間世界坐標系）之間的轉換，從而實現實體對象在虛擬空間世界坐標系下的定位，以確定實體對象在數字孿生模型中映射的虛擬對象模型的真實位置。

在目前的視頻檢測方法中，對于諸如辦公場景內常見的桌子等具備拼接結構的實體對象，常規目標檢測算法只能預測出圖像中桌子所在的大致矩形區域，不能準確地對桌子的具體位置進行精準定位；并且對大尺度目標（多張桌子拼接出的整排辦公桌）可能出現重復檢測的問題，從而導致對于具備拼接結構的實體對象進行視頻檢測時會出現實體數量檢測結果的準確度較低以及實體位置定位精度較低的問題，進而，也間接造成構建/更新的數字孿生模型中的模型信息出現失真。

發明內容

有鑒于此，本申請的目的在于提供一種面向建筑數字孿生的視頻檢測方法及系統，以在對視頻圖像幀中具備拼接結構的實體對象進行圖像目標檢測時，提高實體位置定位精度，從而對拼接結構中包括的每個實體對象進行分割，間接提高實體數量檢測結果的準確度，完成對現有視頻檢測方法的優化，有利于提高實體建筑場景在建筑信息模型中的真實還原度，從而提高用戶對于實體建筑場景的維護與管理效率。

第一方面，本申請實施例提供了一種面向建筑數字孿生的視頻檢測方法，所述視頻檢測方法用于對連續視頻圖像幀中出現的目標實體對象進行圖像目標檢測；其中，所述連續視頻圖像幀用于表征拍攝裝置連續拍攝到的實體建筑場景內的多幀場景圖像；所述目標實體對象至少包括：所述實體建筑場景內具有拼接結構的第一實體對象和/或在所述連續視頻圖像幀中處于靜止狀態的第二實體對象；所述視頻檢測方法包括：

獲取所述連續視頻圖像幀，對所述連續視頻圖像幀中包括的每一幀待檢測圖像進行實體對象檢測，確定每一幀待檢測圖像中包括的實體對象類別；

當檢測到任意一幀待檢測圖像中出現所述第一實體對象時，則從該幀待檢測圖像中，獲取所述第一實體對象所在的圖像連通區域，得到第一圖像連通區域；

將所述第一圖像連通區域輸入預先訓練好的直線檢測模型中，得到所述第一圖像連通區域的直線檢測結果；其中，所述直線檢測模型用于對不同實體對象在所述第一圖像連通區域內顯示出的圖像邊緣進行直線段檢測；