[發明專利]一種面向建筑數字孿生的視頻檢測方法及系統

有效

• 申請號: 202210217839.5
• 申請日: 2022-03-08
• 公開（公告）號: CN114332741B
• 公開（公告）日: 2022-05-10
• 發明（設計）人: 王佳;周小平;馮馳原;鄭洋;傅文峰;陳丹燕
• 申請（專利權）人: 盈嘉互聯（北京）科技有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/25;G06V10/26;G06N3/04
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 張文娥

1.一種面向建筑數字孿生的視頻檢測方法，其特征在于，所述視頻檢測方法用于對連續視頻圖像幀中出現的目標實體對象進行圖像目標檢測；其中，所述連續視頻圖像幀用于表征拍攝裝置連續拍攝到的實體建筑場景內的多幀場景圖像；所述目標實體對象至少包括：所述實體建筑場景內具有拼接結構的第一實體對象或者在所述連續視頻圖像幀中處于靜止狀態的第二實體對象或者需要在方向上區分實體對象在所述實體建筑場景與建筑信息模型之間顯示差異的第三實體對象；所述視頻檢測方法包括：

獲取所述連續視頻圖像幀，對所述連續視頻圖像幀中包括的每一幀待檢測圖像進行實體對象檢測，確定每一幀待檢測圖像中包括的實體對象類別；

當檢測到任意一幀待檢測圖像中出現所述第一實體對象時，則從該幀待檢測圖像中，獲取所述第一實體對象所在的圖像連通區域，得到第一圖像連通區域；

將所述第一圖像連通區域輸入預先訓練好的直線檢測模型中，得到所述第一圖像連通區域的直線檢測結果；其中，所述直線檢測模型用于對不同實體對象在所述第一圖像連通區域內顯示出的圖像邊緣進行直線段檢測；

從所述直線檢測結果包括的多個圖像邊緣直線段中，確定平行于第一直角邊方向的第一平行線，以及平行于第二直角邊方向的第二平行線；其中，所述第一直角邊方向與所述第二直角邊方向互相垂直；所述第一直角邊方向是根據所述第一實體對象在所述第一圖像連通區域內顯示出的圖像邊緣確定的；

根據所述第一平行線與所述第二平行線在所述第一圖像連通區域內形成的交點，確定所述第一實體對象在所述第一圖像連通區域內的圖像位置。

2.根據權利要求1所述的視頻檢測方法，其特征在于，在所述確定每一幀待檢測圖像中包括的實體對象類別之后，所述視頻檢測方法還包括：

從所述連續視頻圖像幀中，獲取多組包括同一實體對象的相鄰幀待檢測圖像；

當檢測到所述相鄰幀待檢測圖像中出現所述第二實體對象時，從所述連續視頻圖像幀中，獲取所述第二實體對象所在的每組相鄰幀待檢測圖像作為目標檢測圖像幀組；

根據所述第二實體對象在第一待檢測圖像中的目標圖像位置，將所述第二實體對象在每一所述目標檢測圖像幀組中的圖像位置統一校正為所述目標圖像位置；其中，所述第一待檢測圖像用于表征每一所述目標檢測圖像幀組中拍攝時間最早的待檢測圖像。

3.根據權利要求2所述的視頻檢測方法，其特征在于，在所述連續視頻圖像幀的拍攝過程中，通過實體移動跟蹤裝置對所述實體建筑場景內的每一實體對象的位置變化進行跟蹤檢測，得到同一實體對象在所述連續視頻圖像幀中的真實位置變化結果；所述檢測到所述相鄰幀待檢測圖像中出現所述第二實體對象，包括：

根據同一實體對象在每一幀待檢測圖像中對應的圖像區域邊界，確定同一實體對象在所述相鄰幀待檢測圖像中的圖像位置變化結果；

從所述真實位置變化結果中，獲取同一實體對象在所述相鄰幀待檢測圖像中的目標位置變化結果；

當檢測到所述圖像位置變化結果與所述目標位置變化結果之間的結果相似度不符合預先設置的實體運動條件時，則確定檢測到所述相鄰幀待檢測圖像中出現所述第二實體對象。

4.根據權利要求2所述的視頻檢測方法，其特征在于，所述檢測到所述相鄰幀待檢測圖像中出現所述第二實體對象，還包括：

根據同一實體對象在所述相鄰幀待檢測圖像中對應的圖像區域邊界，對同一實體對象在所述相鄰幀待檢測圖像中對應的圖像區域進行幀間差分處理，得到每一實體對象在所述相鄰幀待檢測圖像中對應的幀間差分處理結果；其中，所述幀間差分處理結果用于通過同一實體對象在所述相鄰幀待檢測圖像中的圖像亮度差異，來表征該實體對象在所述相鄰幀待檢測圖像中處于運動狀態/靜止狀態；

當檢測到所述幀間差分處理結果表征該實體對象在所述相鄰幀待檢測圖像中處于靜止狀態時，則確定檢測到所述相鄰幀待檢測圖像中出現所述第二實體對象，并確定該實體對象為所述第二實體對象。