[發明專利]基于單目視圖的三維重建方法與裝置

有效

• 申請號: 202010887244.1
• 申請日: 2020-08-28
• 公開（公告）號: CN112116700B
• 公開（公告）日: 2022-09-16
• 發明（設計）人: 李甲;石鼎豐;趙一凡;趙沁平
• 申請（專利權）人: 北京航空航天大學
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06N3/04
• 代理公司: 北京唯智勤實知識產權代理事務所(普通合伙) 11557
• 代理人: 陳佳

本公開的實施例公開了基于單目視圖的三維重建方法與裝置。該方法的一具體實施方式包括：獲取輸入圖像；對上述輸入圖像進行多次卷積處理，得到多層特征圖序列；將上述多層特征圖序列中的第二層特征圖輸入至局部特征增強模塊以生成局部增強特征圖集；響應于對上述多層特征圖序列中的最后一層特征圖進行卷積操作得到的全局特征圖，將上述全局特征圖與上述局部增強特征圖集進行融合，得到整體特征圖；將上述整體特征圖輸入至三維部件生產器以生成具有部件級信息的三維信息。該實施方式實現了快速準確地呈現三維空間中各個部件級信息。

技術領域

本公開的實施例涉及計算機技術領域，具體涉及基于單目視圖的三維重建方法與裝置。

背景技術

從圖片的信息重建對應的三維模型，是理解并且和這個世界進行交互的重要步驟。相關的三維重建方法往往基于同一物體的多個不同視圖之間的相關關系，估計出物體的三維模型，或著通過單目圖像重建出三維模型。

然而，當采用上述方法進行三維模型的重建，經常會存在以下技術問題：

第一，基于同一物體的多個不同視圖之間的相關關系估計的三維模型往往依賴于額外的輔助信息，局部特征的表現性較弱，難以呈現精細化的局部特征結構；

第二，在生成三維空間中各個部件級信息時速度較慢，且準確度不高。

發明內容

本公開的內容部分用于以簡要的形式介紹構思，這些構思將在后面的具體實施方式部分被詳細描述。本公開的內容部分并不旨在標識要求保護的技術方案的關鍵特征或必要特征，也不旨在用于限制所要求的保護的技術方案的范圍。

本公開的一些實施例提出了基于單目視圖的三維重建方法與裝置，來解決以上背景技術部分提到的技術問題中的一項或多項。

第一方面，本公開的一些實施例提供了基于單目視圖的三維重建方法，該方法包括：獲取輸入圖像；對上述輸入圖像進行多次卷積處理，得到多層特征圖序列；將上述多層特征圖序列中的第二層特征圖輸入至局部特征增強模塊以生成局部增強特征圖集；響應于對上述多層特征圖序列中的最后一層特征圖進行卷積操作得到的全局特征圖，將上述全局特征圖與上述局部增強特征圖集進行融合，得到整體特征圖；將上述整體特征圖輸入至三維部件生產器以生成具有部件級信息的三維信息。

第二方面，本公開的一些實施例提供了一種基于單目視圖的三維重建裝置，裝置包括：獲取單元，被配置成獲取輸入圖像；卷積處理單元，被配置成對上述輸入圖像進行多次卷積處理，得到多層特征圖序列；第一生成單元，被配置成將上述多層特征圖序列中的第二層特征圖輸入至局部特征增強模塊以生成局部增強特征圖集；融合單元，被配置成響應于對上述多層特征圖序列中的最后一層特征圖進行卷積操作得到的全局特征圖，將上述全局特征圖與上述局部增強特征圖集進行融合，得到整體特征圖；第二生成單元，被配置成將上述整體特征圖輸入至三維部件生產器以生成具有部件級信息的三維信息。

第三方面，本公開的一些實施例提供了一種電子設備，包括：一個或多個處理器；存儲裝置，其上存儲有一個或多個程序，當一個或多個程序被一個或多個處理器執行，使得一個或多個處理器實現如第一方面中任一的方法。

第四方面，本公開的一些實施例提供了一種計算機可讀介質，其上存儲有計算機程序，其中，程序被處理器執行時實現如第一方面中任一的方法。