[發明專利]視差圖獲取方法、裝置、存儲介質及設備

有效

• 申請號: 201910243260.4
• 申請日: 2019-03-28
• 公開（公告）號: CN109978936B
• 公開（公告）日: 2022-12-30
• 發明（設計）人: 揭澤群
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T7/55
• 分類號: G06T7/55;G06N3/04;G06T7/33
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 張所明

1.一種視差圖獲取方法，其特征在于，所述方法包括：

獲取目標空間區域的多張視點圖像；

對于所述多張視點圖像中的任意一個圖像對，基于第一網絡分別對所述圖像對中的左圖像和右圖像逐層進行特征提取，所述第一網絡包括多個非空洞卷積層，獲取所述多個非空洞卷積層輸出的左特征圖和右特征圖；

基于所述第一網絡的第M個非空洞卷積層輸出的第一左特征圖和第一右特征圖，獲取第一視差圖，M為正整數；

獲取第M-1個非空洞卷積層輸出的第二左特征圖和第二右特征圖；

根據所述第一視差圖、所述第二左特征圖和所述第二右特征圖，采用第二網絡獲取第二視差圖，所述第二網絡包括具有不同空洞倍率的多個空洞卷積層。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

獲取第M-2個非空洞卷積層輸出的第三左特征圖和第三右特征圖；

根據所述第二視差圖、所述第三左特征圖和所述第三右特征圖，采用所述第二網絡獲取第三視差圖；

重復執行根據前一個非空洞卷積層輸出的左特征圖和右特征圖、后一個非空洞卷積層對應的視差圖，采用所述第二網絡，獲取所述前一個非空洞卷積層對應的視差圖的過程，直至所述第一網絡的第N個非空洞卷積層，N為小于M的正整數；

將所述第N個非空洞卷積層對應的視差圖作為所述圖像對最終的視差圖。

3.根據權利要求1所述的方法，其特征在于，所述根據所述第一視差圖、所述第二左特征圖和所述第二右特征圖，采用第二網絡獲取第二視差圖，包括：

根據所述第一視差圖、所述第二左特征圖和所述第二右特征圖，獲取中間特征圖；

基于所述第二網絡對所述中間特征圖進行第一處理，得到所述第二視差圖。

4.根據權利要求3所述的方法，其特征在于，所述基于所述第二網絡對所述中間特征圖進行第一處理，得到所述第二視差圖，包括：

基于并行且具有不同空洞倍率的多個空洞卷積層，分別對所述中間特征圖執行卷積操作，得到與所述多個空洞卷積層數目一致的多個特征張量；

基于所述第二網絡中的非空洞卷積層，對所述中間特征圖執行卷積操作，得到第一權重張量，所述第一權重張量的一個通道代表一個空洞倍率的空洞卷積層輸出的特征張量的權重系數；

對于所述多個特征張量中的每個特征向量，獲取所述特征張量與所述第一權重張量的第一乘積結果；

對得到的全部第一乘積結果執行相加操作，得到組合特征；

對所述組合特征進行第二處理，得到第二權重張量；

根據所述組合特征和所述第二權重張量，獲取所述第二視差圖。

5.根據權利要求1所述的方法，其特征在于，所述基于所述第一網絡的第M個非空洞卷積層輸出的第一左特征圖和第一右特征圖，獲取第一視差圖，包括：

將所述第一左特征圖和所述第一右特征圖逐像素錯位相連，得到第一張量；

對所述第一張量進行降維處理，得到所述第一視差圖。

6.根據權利要求3所述的方法，其特征在于，所述根據所述第一視差圖、所述第二左特征圖和所述第二右特征圖，獲取中間特征圖，包括：

對所述第一視差圖進行上采樣處理；

根據所述第一視差圖對所述第二右特征圖進行映射處理，得到映射特征圖；

將所述第一視差圖的上采樣結果、所述第二左特征圖和所述映射特征圖在通道維度上相連，得到所述中間特征圖。

7.根據權利要求4所述的方法，其特征在于，所述根據所述組合特征和所述第二權重張量，獲取所述第二視差圖，包括：

獲取所述組合特征與所述第二權重張量的第二乘積結果；

對所述第二乘積結果進行降維處理，得到所述第二視差圖。

8.根據權利要求4所述的方法，其特征在于，所述對所述組合特征進行第二處理，得到第二權重張量，包括：

將所述組合特征依次經過全局池化層、第一全連接層、第一激活層、第二全連接層和第二激活層處理，得到所述第二權重張量。